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“性 能 测试 ?是 什么 ? 很 多 人 即便 没有 从 事 过 性 能 测试 工作 ,也 大 都 听 说 过 这 个 名 词 。 
然而 从 企业 实践 的 角度 ,究竟 什么 是 软件 性 能 ? 软件 测试 中 的 性 能 测试 应 该 如 何 开展 ? 
对 于 性 能 进行 测试 要 通过 哪些 指标 来 着 手 ? 

当今 社会 ,电子 商务 已 经 不 是 什么 新 鲜 名 词 。 大 家 都 有 网 购 的 经 历 , 也 都 通过 电子 银 
行进 行 账户 管理 。 然 而 ,涉及 金钱 ,就 不 能 不 对 安全 性 多 加 关注 。 举 个 例子 而 言 ,客户 在 
银行 存款 ,存款 额度 不 能 无 缘 无 故 减少 ,并 且 交 易 记录 可 查 , 这 是 最 低 标 准 。 不 能 说 因为 
某 次 交易 量 过 大 ,发 生 系统 崩溃 ,所 有 数据 永久 性 丢失 ,这 是 极为 严重 的 灾难 。 人 性 能 测试 
就 做 这 些 , 它 的 关注 点 已 经 不 再 是 软件 是 否 实现 什么 样 的 功能 这 样 的 层面 , 它 关 注 的 是 客 
户 的 交易 感受 是 否 迅 速 、 在 突然 增加 巨大 交易 量 的 前 提 下 系统 是 不 是 能 够 从 容 应 对 等 问 
题 ,通过 本 书 的 学 习 , 读 者 会 知道 这 涉及 性 能 测试 中 十 分 重要 的 概念 一 一 负载 测试 及 压力 
测试 。 这 里 只 是 举 出 了 这 样 一 个 简单 的 例子 ,实际 性 能 测试 的 内 容 要 多 得 多 。 

对 应 用 系统 本 身 性 能 的 关注 和 软件 性 能 的 复杂 性 催生 了 专门 的 "性 能 测试 工程 师 ” 
这 一 职位 。 根 据 一 些 业 内 人 士 的 统计 ,“ 性 能 测试 工程 师 ” 无 论 从 升 职 空间 ,还 是 薪资 
标准 上 都 不 亚 于 开发 人 员 。 从 国内 从 业 人 员 的 数量 和 质量 指标 来 看 ,国内 的 性 能 测试 
人 员 缺 口 还 是 比较 大 的 ,尤其 是 能 够 统筹 规划 .承担 大 型 系统 性 能 测试 工作 的 人 员 更 
加 稀少 。 

软件 性 能 测试 是 十 分 复杂 的 过 程 , 它 涉及 的 因素 十 分 庞杂 ,包括 网 络 环境 、 数 据 库 
服务 器 .应 用 服务 器 ,业务 逻辑 的 实现 方式 .系统 采用 的 架构 .代码 优化 速度 .使 用 者 的 
使 用 方式 都 会 对 软件 的 性 能 表现 造成 影响 ,在 这 种 局 面 下 ,性 能 测试 的 开展 是 十 分 不 
易 的 。 

本 书面 对 这 种 挑战 ,将 从 性 能 测试 的 各 个 方面 展示 性 能 测试 的 原理 ,实施 过 程 等 内 
容 , 力 求全 面 而 又 系统 地 阐述 企业 性 能 测试 的 过 程 ,使 读者 具备 性 能 测试 实践 的 能 力 。 


1. 本 书 特色 


本 书 以 软件 测试 的 基本 概念 为 出 发 点 ,讲述 软件 测试 的 基本 原理 。 在 使 读者 具备 测 
试 理论 的 知识 储备 之 后 ,引入 性 能 测试 。 从 性 能 测试 基础 理论 ,到 性 能 测试 的 工具 、 应 用 
以 及 团队 建设 等 方面 ,系统 而 又 详实 地 介绍 性 能 测试 。 本 书 的 行文 得 到 了 测试 专家 Kern 
Zhang 的 许多 宝贵 指导 意见 ,相信 是 性 能 测试 学 习 者 的 一 个 不 错 的 选择 。 


2. 本 书 组 织 


本 书 第 1 一 第 8 章 围绕 软件 测试 基础 理论 进行 阐述 ,从 第 9 章 开始 引入 性 能 测试 ,在 
后 续 章 节 中 描述 了 性 能 测试 原理 应 用 领域 .团队 建设 测试 工 具 、 需 求 分 析 .Web 性 能 测 
试 等 方方面面 的 内 容 。 

本 书 由 李 千 目 主编 , 陶 传 奇 、 刘 晓 迁 、 陆 建 峰 、 许 春 根 任 副 主编 。 何 光明 、 王 珊 珊 、 卢 振 
侠 \ 石 雅 琴 、 杨 橙 、 陈 莉 萍 、 陈 风 、 曹 冬 梅 等 也 参与 了 本 书 的 部 分 编写 工作 。 


编 者 
2015 年 6 月 
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第 1 章 软件 测试 的 基本 概念 
1.1 软件 质量 


1.1.1 软件 质量 的 概念 


1979 年 ,Fisher 和 Light 将 软件 质量 定义 为 : 表征 计算 机 系统 卓越 程度 的 所 有 属性 
的 集合 。1982 年 ,Fisher 和 Baker 将 软件 质量 定义 为 : 软件 产品 满足 明确 需求 的 一 组 属 
性 的 集合 。20 世纪 90 年 代 , Norman、Robin 等 将 软件 质量 定义 为 : 表征 软件 产品 满足 明 
确 和 隐 含 需求 的 能 力 的 特性 或 特征 的 集合 。 

1994 年 ,国际 标准 化 组 织 公布 的 国际 标准 ISO 8042 综合 将 软件 质量 定义 为 : 反应 实 
体 满足 明确 的 和 隐 含 的 需求 的 能 力 的 特性 总 和 。 

综 上 所 述 ,软件 质量 是 产品 、 组 织 和 体系 或 过 程 的 一 组 固有 特性 ,反映 它们 满足 顾客 
和 其 他 相关 方面 要 求 的 程度 ,如 CMU SEI 的 Watts Humphrey 指出 :“ 软 件 产 品 必须 提 
供用 户 所 需 的 功能 ,如 果 做 不 到 这 一 点 ,什么 产品 都 没有 意义 。 其 次 ,这 个 产品 能 够 正常 
工作 。 如 果 产 品 中 有 很 多 缺陷 ,不 能 正常 工作 ,那么 不 管 这 种 产品 性 能 如 何 , 用 户 也 不 会 
使 用 它 。” 而 Peter Denning 强调 :“ 越 是 关注 客户 的 满意 度 ,软件 就 越 有 可 能 达到 质量 要 
求 。 程 序 的 正确 性 固然 重要 ,但 不 足以 体现 软件 的 价值 .” 

GB/T 11457 一 2006《 软 件 工程 术语 ) 中 定义 软件 质量 为 : 

(1) 软件 产品 中 能 满足 给 定 需要 的 性 质 和 特性 的 总 体 。 

(2) 软件 具有 所 期 望 的 各 种 属性 的 组 合 程度 。 

(3) 顾客 和 用 户 觉 得 软件 满足 其 综合 期 望 的 程度 。 

(4) 确定 软件 在 使 用 中 将 满足 顾客 预期 要 求 的 程度 。 


1.1.2 软件 质量 的 属性 


1. 正确 性 


正确 性 (Correctness) 是 指 系统 满足 规格 说 明和 用 户 目 标的 程度 , 即 在 预定 环境 下 能 
正确 地 完成 预期 功能 的 程度 。 


2. 健壮 性 / 鲁 棒 性 


健壮 性 (Robustness) 是 指 在 异常 情况 下 (如 硬件 发 生 故 障 、 输 入 的 数据 无 效 或 操作 错 
误 等 ) ,软件 能 够 正常 运行 的 能 力 。 健 壮 性 有 两 层 含义 : 一 是 容错 能 力 ,二 是 恢复 能 力 。 
容错 是 指 发 生 异常 情况 时 系统 不 出 错误 的 能 力 , 对 于 应 用 于 航空 航天 、 武 器 ,金融 等 
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领域 的 这 类 高 风险 系统 ,容错 设计 非常 重要 。 
恢复 则 是 指 软件 发 生 错 误 后 (不 论 死活 ) 重 新 运行 时 ,能 否 恢复 到 没有 发 生 错 误 前 的 
状态 的 能 力 。 


3. 可 靠 性 


可 靠 性 (Reliability) 是 指 软件 系统 在 一 定 的 时 间 内 无 故障 运行 的 能 力 。 
可 靠 性 是 一 个 与 时 间 相关 的 属性 , 指 的 是 在 一 定 的 环境 下 ,在 一 定 的 时 间 段 内 ,程序 
不 出 现 故 障 的 概率 ,通常 用 平均 无 故障 时 间 (Mean-Time To Fault,MTTF) 来 衡量 。 


4. 性 能 


性 能 (Performance) 是 指 软件 及 时 提供 相应 服务 的 能 力 , 具 体 包括 速度 ,吞吐 量 和 持 
续 高 速 性 三 方面 的 要 求 : 

速度 往往 通过 平均 响应 时 间 来 量度 ; 

春 吐 量 通过 单位 时 间 处 理 的 交易 数 来 量度 ; 

持续 高 速 性 是 指 保持 高 度 处 理 速度 的 能 力 。 


5. 安全 性 


安全 性 (Security) 是 指 软件 同时 兼顾 向 合法 用 户 提供 服务 ,以 及 阻止 非 授权 使 用 软件 
及 资源 的 能 力 。 安 全 性 既 属 于 技术 问题 又 属于 管理 问题 。 


6. 易 用 性 
易 用 性 (Usability) 是 指 用 户 使 用 软件 的 容易 程度 。 软 件 的 易 用 性 要 让 用 户 来 评价 。 
7. 可 用 性 


可 用 性 (Availability) 指 的 是 产品 对 用 户 来 说 有 效 、 易 学 高效. 好 记 、 少 错 和 令 人 满意 
的 程度 , 即 用 户 能 否 用 软件 完成 他 的 任务 ,效率 如 何 , 主 观感 受 怎样 。 


8. 互 操作 性 


互 操作 性 (Interoperability) 是 指 本 软件 与 其 他 系统 交换 数据 和 相互 调用 服务 用 以 协 
同 运 作 的 难 易 程 度 。 


9. 易 理 解 性 
易 理 解 性 (Understandability) 是 指 理解 和 使 用 系统 的 难 易 程度 。 
10. 可 扩展 性 /灵活 性 /适应 性 /可 伸缩 性 


可 扩展 性 (Extensibility) 反 映 软 件 适 应 “变化 ”的 能 力 , 调 整修 改 或 改进 正在 运行 的 
软件 系统 以 适应 新 需求 、 变 化 了 的 需求 的 难 易 程度 。 


2 


软件 测试 的 基本 概念 


11. 可 重用 性 
可 重用 性 (Resuability) 反 映 了 重用 软件 或 其 中 一 部 分 的 难 易 程度 。 


12. 可 测试 性 
可 测试 性 (Testability) 指 对 软件 测试 以 证 明 其 满足 需求 规约 的 难 易 程度 。 
13. 可 维护 性 


可 维护 性 (Maintainability) 指 为 修改 Bug 增加 功能 、 提 高 质量 而 诊断 并 修改 软件 的 
难 易 程 度 。 


14. 可 移植 性 
可 移植 性 (Portability) 是 指 软件 不 经 修改 或 稍 加 修改 就 可 以 运行 于 不 同 软 硬 件 环 境 
的 难 易 程度 ,主要 体现 为 代码 的 可 移植 性 。 


1.1.3 软件 质量 的 模型 


1. Bohm 质量 模型 


Bohm 质量 模型 是 1976 年 由 Bohm 等 提出 的 分 层 方案 ,其 将 软件 的 质量 特性 定义 成 
分 层 模型 ,如 图 1-1 所 示 。 


设备 独立 性 
自 包含 性 
正确 性 
完备 性 
健壮 性 


可 计 测 性 


且 洒 | 


自 描述 性 
结构 化 性 


可 扩充 性 


图 1-1 Bohm 质量 模型 
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2. McCall 质量 模型 


McCall 质量 模型 是 1979 年 由 McCall 等 人 提出 的 , 它 将 软件 质量 的 概念 建立 在 
11 个 质量 特性 之 上 ,而 这 些 质量 特性 分 别 是 面向 软件 产品 的 运行 、 修 正和 转移 的 ,如 图 1-2 
所 示 。 


可 维护 性 互联 性 
可 测试 性 可 移植 性 


正确 性 ”可靠 性 ” 易 用 性 ”效率 
完整 性 
图 1-2 McCall 质量 模型 


3. ISO 的 软件 质量 模型 


按照 ISO/IEC 9126-1: 2001, 软 件 质 量 模型 可 以 分 为 内 部 质量 和 外 部 质量 模型 .使 用 
质量 模型 ,而 质量 模型 中 又 将 内 部 和 外 部 质量 分 成 6 个 质量 特性 ,将 使 用 质量 分 成 4 个 质 
量 属性 ,具体 见 图 1-3 和 图 1-4。 


外 部 质量 和 内 部 质量 
I 


1 
功能 性 可 靠 性 易 用 性 效率 可 维护 性 | | 可 移植 性 


1-3 内 部 质量 和 外 部 质量 模型 


使 用 质量 
] 
有 效 性 | | 生产 性 | | 安全 性 | | 满意 度 


图 1-4 使 用 质量 模型 


1.1.4 软件 质量 的 量度 


软件 质量 的 量度 主要 是 根据 软件 生存 周期 中 对 软件 质量 的 要 求 所 进行 的 一 项 活动 。 
它 主要 分 为 三 方面 : 外 部 量度 、 内 部 量度 和 使 用 量度 。 
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1. 外 部 量度 

这 是 在 测试 和 使 用 软件 产品 过 程 中 进行 的 ,通过 观察 该 软件 产品 的 系统 行为 ,执行 对 
其 系统 行为 的 测量 得 到 量度 的 结果 。 

2. 内 部 量度 

这 是 在 软件 设计 和 编码 过 程 中 进行 的 ,通过 对 中 间 产 品 的 静态 分 析 来 测量 其 内 部 质 
量 特 性 。 内 部 量度 的 主要 目的 是 为 了 确保 获得 所 需 的 外 部 质量 和 使 用 质量 ,与 外 部 关系 
是 二 者 相辅相成 , 密 不 可 分 。 

3. 使 用 质量 的 量度 


这 是 在 用 户 使 用 过 程 中 完成 的 ,因为 使 用 质量 是 从 用 户 观点 来 对 软件 产品 提出 的 质 
量 要 求 ,所 以 它 的 量度 主要 是 针对 用 户 使 用 的 绩效 ,而 不 是 软件 自身 。 


1.2 软件 测试 的 概念 
1.2.1 软件 测试 的 定义 与 目的 


1. 软件 测试 的 定义 


Glenford J. Myers 于 1979 年 给 出 测试 的 定义 为 软件 测试 是 为 发 现 错误 而 执行 的 一 
个 程序 或 者 系统 的 过 程 ,同时 给 出 了 三 个 关于 测试 的 重要 观点 : 

测试 是 为 了 证 明 程 序 有 错 , 而 不 是 证 明 程序 正确 。 

一 个 好 的 测试 用 例 在 于 它 能 发 现 以 前 未 发 现 的 错误 。 

一 个 成 功 的 测试 是 发 现 了 以 前 未 发 现 的 错误 的 测试 。 

1990 年 ,IEEE 610. 12 标准 中 给 出 测试 的 正式 定义 如 下 : 

(1) 在 规定 条 件 下 运行 系统 或 构件 的 过 程 ; 

(2) 分 析 软 件 项 目的 过 程 。 


2. 软件 测试 的 目的 


用 最 少 的 时 间 和 人 力 , 找 出 软件 中 潜在 的 各 种 错误 和 缺陷 。 软 件 测试 的 这 一 目的 贯 
穿 于 整个 测试 过 程 中 。 
测试 的 另 一 收获 是 , 它 能 够 证 明 软 件 的 功能 、 性 能 与 需求 说 明 相 符合 。 


1.2.2 软件 测试 的 原则 


根据 软件 测试 的 目的 ,软件 测试 应 该 遵守 以 下 原则 : 
(1) 应 当 把 “尽早 和 不 断 地 进行 软件 测试 "作为 软件 开发 人 员 的 座右铭 。 


《软件 测试 理论 与 技术 》 


(2) 测试 用 例 应 由 测试 的 输入 数据 和 与 之 对 应 的 预期 输出 结果 两 部 分 组 成 。 
(3) 程序 员 应 避免 测试 自己 的 程序 。 

(4) 在 设计 测试 用 例 时 ,应 该 包括 合理 的 和 不 合理 的 输入 条 件 。 

(5) 充分 注意 测试 中 的 群集 现象 。 

(6) 严格 执行 测试 计划 ,排除 测试 的 随意 性 。 

(7) 应 当 对 每 一 个 测试 结果 做 全 面 检查 。 

(8) 妥善 保存 测试 计划 测试 用 例 .出错 统 计 和 最 终 分 析 报 告 。 


1.3 软件 的 缺陷 与 错误 
1.3.1 软件 缺陷 的 定义 和 类 型 


所 谓 * 缺 陷 (bug)”, 即 计算 机 软件 或 程序 中 存在 的 某 种 破坏 正常 运行 能 力 的 问题 . 错 
误 , 或 者 隐藏 的 功能 缺陷 。 

软件 缺陷 的 主要 类 型 有 : 

(1) 软件 没有 实现 产品 规格 说 明 要 求 的 功能 。 

(2) 软件 出 现 了 不 该 出 现 的 错误 。 

(3) 软件 实现 了 说 明 没 提 到 的 功能 。 

(4) 软件 没 实现 虽然 规格 说 明 中 未 明确 提 及 但 应 实现 的 目标 。 

(5) 软件 难 理解 ,不 易 使 用 。 


1.3.2 软件 缺陷 的 级 别 


软件 缺陷 有 4 种 级 别 ,分 别 为 : 

(1) 致命 的 (Fatal) 。 致 命 的 错误 ,导致 系统 或 者 应 用 程序 崩溃 、 死 机 、 系 统 悬 挂 ,或 者 
造成 数据 丢失 .主要 功能 完全 丧失 。 

(2) 严重 的 (Critical) 。 功 能 或 特性 没有 实现 ,主要 功能 部 分 丧失 ,次 要 功能 完全 均 
失 ,或 致命 的 错误 声明 。 

(3) 一 般 的 (Major) 。 这 种 级 别 的 错误 不 是 很 严重 ,虽然 有 一 些 缺 陷 , 但 是 不 影响 系 
统 和 程序 的 基本 使 用 。 功 能 没有 被 很 好 地 实现 ,没有 达到 预期 要 求 。 

(4) 微小 的 (Minor) 。 无 关 紧 要 的 小 问题 ,软件 仍然 可 以 使 用 ,不 影响 功能 的 实现 。 

除了 严重 性 之 外 ,还 必须 关注 软件 缺陷 处 于 一 种 什么 样 的 状态 ,以便 跟踪 和 管理 某 个 
产品 的 缺陷 ,三 种 基本 的 缺陷 状态 包括 : 

(1) 激活 状态 (Active 或 Open)。 问 题 尚未 解决 ,测试 人 员 新 报告 的 缺陷 ,或 验证 后 
缺陷 仍然 存在 。 

(2) 已 修正 状态 (Fixed 或 Resolved) 。 开 发 人 员 针 对 缺陷 ,修改 程序 ,认为 已 解决 问 
题 ,或 者 通过 单元 测试 。 

(3) 关闭 或 非 激 活 状 态 (Close 或 Inactive) 。 测 试 人 员 验 证 已 修正 的 缺陷 后 ,确认 缺 
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陷 不 存在 后 的 状态 。 
1.3.3 软件 缺陷 产生 的 原因 


软件 缺陷 产生 的 原因 主要 有 三 个 方面 。 
1. 技术 问题 


技术 问题 包括 算法 错误 .语法 错误 .计算 和 精度 错误 .系统 结构 不 合理 .算法 不 科学 、 
接口 参数 传递 不 匹配 。 


2. 团队 工作 


团队 工作 产生 的 原因 包括 : 系统 需求 分 析 时 对 客户 的 需求 理解 不 清楚 ,或 者 和 用 户 
沟通 时 存在 困难 ;不 同 阶段 的 开发 人 员 相 互 理解 不 一 致 ;对 于 设计 或 者 编程 上 的 一 些 假定 
或 依赖 性 ,相关 人 员 没 有 充分 沟通 。 


3. 软件 本 身 


软件 本 身 的 问题 包括 文档 错误 、 内 容 不 正确 或 者 拼写 错误 ;没有 考虑 大 量 用 户 的 使 用 
场合 ,从 而 可 能 会 引起 强度 或 负载 问题 ;对 程序 逻辑 路 径 或 数据 范围 的 边界 考虑 不 够 周 
全 , 漏 掉 某 些 边界 条 件 , 造 成 容量 或 边界 错误 ;对 一 些 实时 应 用 ,要 精心 设计 和 技术 处 理 ， 
保证 精确 的 时 间 同 步 , 否 则 容易 引起 时 间 上 不 协调 ,不 一 致 带 来 的 问题 ;没有 考虑 系统 崩 
溃 后 的 自我 恢复 或 数据 的 异地 备份 .灾难 性 恢复 等 问题 ,从 而 存在 系统 安全 性 、 可 靠 性 的 
隐患 ;硬件 或 系统 软件 上 存在 的 错误 ;软件 开发 标准 或 过 程 上 的 错误 。 


1.3.4 软件 缺陷 的 分 类 


软件 缺陷 可 分 为 5 类 。 

1. 功能 缺陷 

功能 缺陷 包括 规格 说 明 书 缺陷 、 功 能 缺陷 测试 缺陷 和 测试 标准 引起 的 缺陷 。 
2. 系统 缺陷 


系统 缺陷 包括 外 部 接口 缺陷 、 内 部 接口 缺陷 ,硬件 结构 缺陷 ,操作 系统 缺陷 ,软件 结构 
缺陷 、 控 制 与 顺序 缺陷 、 资 源 管 理 缺 陷 。 


3. 加 工 缺 陷 
加 工 缺 陷 包括 算术 与 操作 缺陷 、 初 始 化 缺陷 ,控制 和 次 序 缺 陷 .静态 逻辑 缺陷 。 
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4. 数据 缺陷 

数据 缺陷 包括 动态 数据 缺陷 .静态 数据 缺陷 数据 内 容 、` 结 构 和 属性 缺陷 。 

5. 代码 缺陷 

包括 数据 说 明 错 、 数 据 使 用 错 、 计 算 错 、 比 较 错 、 控 制 流 错 、 界 面 错 、 输 入 和 输出 错 等 。 


1.3.5 修复 软件 缺陷 的 代价 


缺陷 发 现 或 解决 得 越 迟 ,成 本 就 越 高 。 平 均 而 言 , 如 果 在 需求 阶段 修正 一 个 错误 的 代 
价 是 1 ,那么 ,在 设计 阶段 就 是 它 的 3 一 6 倍 , 在 编程 阶段 是 它 的 10 倍 , 在 内 部 测试 阶段 是 
它 的 20 一 40 倍 , 在 外 部 测试 阶段 是 它 的 30 一 70 倍 , 而 到 了 产品 发 布 出 去 时 ,这 个 数字 就 
是 40 一 1000 倍 , 修 正 错 误 的 代价 不 是 随时 间 线 性 增长 的 ,而 几乎 是 呈 指 数 增 长 的 。 


1.4 软件 测试 的 经 济 学 与 心理 学 
1.4.1 软件 测试 的 心理 学 


1. 程序 测试 的 过 程 具有 破坏 性 

软件 测试 适合 于 被 视 作 发 现 程序 中 错误 的 破坏 性 过 程 。 一 个 成 功 的 测试 ,通过 诱发 
程序 发 生 错 误 ,可 以 在 这 个 方向 上 促进 软件 质量 的 改进 和 提高 。 

2. 程序 员 应 避免 测试 自己 的 程序 

开发 和 测试 是 不 同 的 活动 ,开发 是 创造 或 建立 某 种 事物 的 行为 ,而 测试 是 证 实 其 不 正 
常 ,一 个 人 不 太 容 易 同 时 做 好 这 两 项 工作 。 由 于 程序 员 主 观 上 对 问题 的 叙述 和 说 明 的 误 
解 而 产生 的 错误 在 程序 员 测试 自己 的 程序 时 ,往往 还 会 带 来 同样 的 误解 从 而 导致 问题 难 
以 被 发 现 。 

3. 程序 设计 组 织 不 应 测试 自己 的 程序 

要 程序 设计 组 织 在 测试 自己 的 程序 时 保持 客观 的 态度 是 困难 的 ,因为 如 果 用 正确 的 
定义 看 待 测试 ,就 不 大 可 能 按 预定 计划 完成 测试 ,也 不 大 可 能 把 消耗 的 代价 限制 在 消耗 的 
范围 以 内 。 


1.4.2 软件 测试 的 经 济 学 


为 了 应 对 测试 经 济 学 的 挑战 ,应 该 在 开始 测试 之 前 建立 某 些 策略 。 黑 盒 测试 和 白 盒 
测试 是 两 种 普遍 的 策略 。 
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1. 黑 盒 测试 


黑 盒 测试 是 一 种 重要 的 测试 策略 ,又 称 为 数据 驱动 的 测试 或 输入 输出 驱动 的 测试 。 
使 用 这 种 测试 方法 时 ,将 程序 视 为 一 个 黑 盒子 ,测试 目标 与 程序 的 内 部 机 制 和 结构 完全 无 
关 , 而 是 将 重点 集中 放 在 发 现 程序 不 按 其 规格 说 明 书 正确 运行 的 环境 条 件 上 。 在 这 种 方 
法 中 ,测试 数据 完全 来 源 于 软件 规格 说 明 ,不 需要 了 解 程序 的 内 部 结构 。 


2. 白 盒 测 试 


白 盒 测试 又 称 为 逻辑 驱动 测试 ,这 种 测试 策略 是 对 程序 的 逻辑 结构 进行 检查 ,从 中 获 
取 测 试 数据 。 


1.5 软件 质量 保证 
1.5.1 软件 质量 保证 概要 


软件 质量 保证 是 通过 对 软件 产品 有 计划 地 进行 各 种 评审 和 审核 ,从 而 验证 和 确认 生 
成 出 来 的 软件 产品 是 否 符合 标准 的 系统 工程 。 

美国 CMU SEI 制定 的 SW 一 CMM( 软 件 能 力 成 熟 度 模型 ) 在 SQA KPA( 软 件 质 量 
保证 关键 过 程 域 ) 中 规定 软件 质量 保证 (Software Quality Assurance,SQA) 活动 的 目标 
有 以 下 几 个 : 

(1) 制定 和 规划 软件 质量 保证 的 任务 。 

(2) 客观 地 验证 软件 产品 和 各 项 任务 是 否 遵 循 适用 的 标准 、 规 程 和 需求 。 

(3) 相关 小 组 和 个 人 保持 良好 的 沟通 ,及 时 通知 他 们 在 软件 质量 保证 方面 的 结果 。 

(4) 高 层 管理 人 员 能 够 参与 并 帮助 解决 项 目 中 不 能 解决 的 不 相 容 问 题 。 


1.5.2 软件 质量 保证 活动 的 实施 


(1) 目标 (Target) ,这 一 步 主 要 是 设 定 质量 特性 与 质量 子 特性 的 评价 标准 。 

(2) 计划 (Plan) ,这 一 步 确定 适合 于 被 开发 软件 的 各 个 阶段 、 各 个 活动 的 质量 评测 检 
查 项 目 与 质量 量度 方法 。 同 时 ,还 要 研讨 实现 质量 目标 的 方法 与 手段 。 

(3) 实施 (Do) ,这 一 步 是 在 软件 开发 的 过 程 中 ,参与 各 个 活动 的 评审 和 各 个 阶段 的 正 
式 技术 评审 。 对 软件 开发 中 各 个 阶段 的 进展 、 完 成 质量 及 出 现 的 问题 进行 监督 ,审核 各 项 
活动 和 中 间 产 品 的 生成 是 否 遵循 相应 的 过 程 规范 ,形成 报告 。 

(4) 检查 (Check) ,以 计划 阶段 确定 的 质量 量度 标准 进行 评价 ,看 质量 是 否 合格 。 

(5) 行动 (Action) ,对 评价 发 现 的 问题 进行 改进 活动 。 
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1.5.3 SQA 与 软件 测试 的 关系 


SQA 与 软件 测试 的 区 别 在 于 : 软件 质量 保证 是 采取 一 些 措施 或 方法 来 改进 软件 开 
发 过 程 ,尽量 防止 软件 缺陷 的 产生 ;而 软件 测试 是 尽 可 能 地 发 现 软件 缺陷 并 确保 缺陷 得 以 
改正 ,使 得 软件 产品 更 加 健壮 。 

SQA 与 软件 测试 的 联系 是 : 二 者 相互 依赖 ,相互 促进 。 软 件 测试 人 员 也 会 做 一 些 质 
量 保证 的 工作 ,这 主要 表现 在 上 面 活动 的 实施 阶段 ,软件 质量 保证 人 员 也 会 从 事 一 些 测试 
活动 ,主要 侧重 于 对 测试 过 程 执行 的 验证 和 确认 。 


1.6 本 章 小 结 


软件 质量 是 产品 、 组 织 和 体系 或 过 程 的 一 组 固有 特性 ,反映 它们 满足 顾客 和 其 他 相关 
方面 要 求 的 程度 。 软 件 质量 有 三 种 模型 : Bohm 质量 模型 ,McCall 质量 模型 .ISO 的 软件 
质量 模型 。 软 件 质量 的 量度 主要 分 为 三 方面 : 外 部 量度 、 内 部 量度 和 使 用 量度 。 本 章 还 
阐述 了 软件 测试 的 定义 .目的 和 要 遵守 的 原则 ,软件 缺陷 的 产生 原因 和 分 类 ,心理 学 与 经 
济 学 对 软件 测试 的 影响 以 及 软件 质量 保证 的 目标 及 实施 和 SQA 与 软件 测试 的 关系 。 


第 2 章 软件 测试 类 型 及 其 在 软件 开发 过 程 中 的 地 位 


2.1 软件 开发 阶段 
2.1.1 软件 生存 周期 

软件 生存 周期 的 主要 阶段 是 制订 计划 、 系 统 与 软件 需求 定义 、 软 件 设计 、 编 程 与 单元 
测试 .集成 测试 与 系统 测试 .运行 和 维护 。 各 阶段 的 主要 任务 如 下 所 述 。 

1. 制订 计划 


确定 要 开发 软件 的 总 目标 ,研究 该 任务 的 可 行 性 ,探讨 解决 问题 的 方案 ,估计 成 本 效 
益 和 进度 ,制订 实施 计划 及 可 行 性 研究 报告 ,提交 管理 部 门 审查 。 


2. 系统 与 软件 需求 定义 


基于 各 种 方式 获取 的 需求 和 建立 的 业务 对 象 模型 和 分 析 模 型 ,编写 系统 和 软件 需求 
规格 说 明 ,提交 管理 机 构 进行 需求 评审 。 


3. 软件 设计 
这 是 软件 工程 的 核心 ,主要 分 为 概要 设计 和 详细 设计 。 
4. 编程 和 单元 测试 


将 软件 设计 规格 说 明 转 换 为 计算 机 可 接受 的 程序 代码 , 即 编程 实现 和 单元 测试 的 
任务 。 


5. 集成 和 系统 测试 
对 已 测试 过 的 模块 进行 组 装 ,进一步 进行 测试 。 
6. 运行 和 维护 
将 软件 投入 使 用 , 若 发 现 问题 ,应 适当 进行 更 正 。 
2.1.2 软件 测试 的 生存 周期 模型 
软件 测试 直观 上 讲 仅 是 对 测试 对 象 进行 检查 、 验 证 ,似乎 很 简单 ,但 实际 上 软件 测试 


是 有 其 严格 测试 过 程 的 ,图 2-1 给 出 了 软件 测试 的 生存 周期 模型 ,描述 了 软件 测试 的 全 
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人 HT 测试 计划 测试 设计 实施 测试 单元 测试 
确定 测试 需求 i 执行 单元 测试 
制定 测试 策略 “下 堆放 再 这 玫 创 一? 建立 测试 有 本 下 记录 测试 结果 
机 测试 NL 回归 测试 
页 你 污 yy > 、-| 
评审 测试 计划 定义 测试 过 程 | 
评估 测试 系统 测试 集成 测试 
ed 执行 系统 测试 执行 集成 调试 
分 析 测 试 结果 ， 提 出 变更 请 求 全 执行 集成 济 
分 析 测 试 情况， 建立 测试 分 析 报 告 一 ] 记录 测试 结果 = et 


图 2-1 软件 测试 的 生存 周期 模型 


2.1.3 测试 信息 流 


测试 过 程 主要 有 三 种 输入 : 

(1) 软件 配置 。 包 括 软件 需求 规格 说 明 、 软 件 设计 规格 说 明 、 源 代码 等 。 

(2) 测试 配置 。 包 括 表明 测试 工作 如 何 进 行 测试 计划 给 出 测试 数据 的 测试 用 例 、 控 
制 测试 进行 的 测试 程序 等 。 

(3) 测试 工具 。 为 了 提高 如 今 的 测试 效率 ,需要 有 测试 工具 的 支持 , 它 为 测试 提供 某 
种 服务 ,减轻 人 们 完成 测试 任务 中 的 手工 劳动 。 

测试 工作 结束 之 后 ,还 要 对 所 有 的 测试 结果 进行 比较 ,然后 开始 排 错 (调试 ) 。 


2.2 规划 阶段 的 测试 
2.2.1 目标 阐述 

目标 阐述 又 称 为 问题 定义 。 规 划 人 员 在 此 阶段 首先 描述 自己 对 产品 的 构想 一 一 产品 
应 该 做 什么 及 为 什么 要 做 。 此 时 形成 的 文档 很 简单 ,只 大 概 地 描述 软件 的 界面 及 性 能 等 。 
最 终 实 现 的 产品 也 不 一 定 会 满足 所 有 的 目标 。 目 标 阐述 的 意义 在 于 为 开发 团队 提供 一 个 
共同 努力 的 方向 。 
2.2.2 需求 分 析 

需求 是 指 必须 实现 的 目标 。 规 划 人 员 在 此 阶段 应 将 需求 转化 成 功能 性 的 术语 ,应 将 


如 何 设 计 和 实现 的 细节 推迟 到 后 续 阶段 留 给 开发 人 员 完 成 。 他 们 必须 详细 地 规定 功能 、 
性 能 、 可 靠 性 目标 及 用 户 界面 的 某 些 方 面 。 
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2.2.3 功能 定义 


功能 定义 在 需求 分 析 文 档 和 设计 文档 之 间架 起 了 沟通 的 桥梁 。 功 能 定义 将 软件 需求 
转化 为 一 系列 特性 和 功能 。 它 包含 的 信息 仅 够 程序 员 明 白 所 描述 的 内 容 , 一 般 不 会 规定 
实现 这 些 特 性 的 细节 。 


2.2.4 规划 阶段 进行 的 测试 


在 规划 阶段 里 ,测试 的 对 象 是 规划 人 员 的 构想 ,而 不 是 代码 。 测 试 人 员 ( 即 评审 人 员 ) 
包括 了 和 营销 人 员 ,产品 经 理 . 设 计 人 员 和 人 类 工程 分 析 师 。 


2.3 设计 阶段 的 测试 
2.3.1 外 部 设计 


主要 是 从 用 户 的 角度 对 产品 进行 描述 ,主要 是 设计 用 户 界面 。 它 描述 了 所 有 的 屏幕 
显示 和 其 他 输出 、 可 用 的 命令 ,命令 语法 、 命 令 或 特性 之 间 的 联系 ,以 及 对 所 有 可 能 输入 的 
反应 。 

外 部 设计 规格 说 明 是 在 外 部 设计 期 间 产生 的 文档 ,这 是 测试 阶段 很 重要 的 依据 。 

用 户 手册 是 另 一 种 文档 ,与 外 部 设计 规格 说 明 不 同 的 是 , 它 是 在 需求 获取 与 定义 阶段 
就 开始 建立 ,以 后 要 不 断 细 化 和 完善 的 文档 。 

外 部 设计 在 后 期 会 被 多 次 修改 ,这 是 因为 很 难 设计 出 一 个 完美 无 缺 的 用 户 界面 。 如 
果 用 户 不 能 够 方便 地 使 用 程序 ,那么 外 部 设计 就 应 当 被 视 为 彻底 失败 。 


2.3.2 内 部 设计 


主要 描述 产品 的 内 部 工作 机 制 , 它 细 化 软件 的 功能 、 性 能 以 及 其 他 软件 特性 ,并 把 它 
们 分 解 到 不 同 的 程序 单元 中 ,同时 设计 系统 功能 所 需 的 数据 内 容 、 数 据 结构 和 数据 流 , 以 
及 程序 代码 如 何 运 行 (好 辑 设 计 )。 内 部 设计 具体 又 可 以 细 分 为 结构 设计 、 数 据 设 计 和 他 
辑 设计 。 

外 部 设计 和 内 部 设计 并 行 开展 .相互 制约 .相互 要 求 。 


2.3.3 设计 阶段 的 测试 
在 设计 阶段 ,测试 的 对 象 来 自 设计 文档 ,主要 采用 的 是 评审 方式 。 这 里 的 文档 主要 


包括 : 
。 外 部 设计 (用户 界面 设计 ,与 其 他 元 素 的 接口 设计 ,系统 构件 部 署 设计 ) 的 规格 
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说 明 。 
。 内 部 设计 (功能 设计 ,系统 体系 结构 设计 ,数据 设计 ) 的 规格 说 明 。 
。 逻辑 设计 (模块 算法 与 数据 结构 设计 ) 的 规格 说 明 。 


2.3.4 伪 代码 分 析 


设计 人 员 在 进行 逻辑 设计 时 使 用 伪 代 码 描述 非常 方便 。 如 果 使 用 的 是 伪 代 码 的 正式 
定义 版 本 ,就 可 以 采用 伪 代 码 分 析 器 来 查找 设计 中 存在 的 缺陷 。 伪 代码 分 析 器 的 工作 依 
赖 于 输入 所 有 即将 编写 的 代码 完备 的 底层 (逻辑 ) 设 计 。 


2.4 编程 阶段 的 测试 
2.4.1 和 白 盒 测试 与 黑 盒 测试 


白 盒 测试 是 编程 阶段 中 最 有 效 的 测试 类 型 ,程序 员 主 要 采用 白 盒 测试 对 每 个 程序 单 
元 进行 测试 ,因为 它 是 这 个 期 间 程序 员 使 用 最 有 效 的 测试 类 型 。 
白 盒 测试 与 黑 盒 测试 的 区 别 是 : 白 盒 测试 是 在 程序 员 十 分 了 解 程序 的 前 提 下 ,对 程 
序 的 迎 辑 结构 进行 的 测试 。 而 黑 盒 测试 则 将 程序 视 为 一 个 黑 盒子 ,测试 人 员 提 供 输入 数 
据 , 观 察 输出 数据 ,并 不 了 解 程序 是 如 何 运 行 的 。 

在 白 盒 测试 中 ,程序 员 要 深入 程序 中 以 开发 测试 ,这 样 带 来 的 好 处 体现 在 重点 测试 、 
测试 覆盖 ,控制 流 、 数 据 完整 性 、 内 部 边界 、 特 定 算法 测试 等 方面 。 


2.4.2 结构 测试 与 功能 测试 

结构 测试 属于 白 盒 测试 ,关注 的 是 如 何 选择 合适 的 程序 或 子 程序 路 径 来 执行 有 效 的 
检查 。 

功能 测试 则 属于 黑 盒 测 试 , 对 功能 的 测试 通常 通过 提供 输入 数据 ,检查 实际 的 输出 结 
果 , 很 少 考虑 程序 的 内 部 结构 。 
2.4.3 路 径 测试 : 覆盖 准则 

路 径 测试 属于 白 盒 测试 ,是 在 程序 控制 流程 图 的 基础 上 ,通过 分 析 控 制 构造 的 环境 复 
杂 性 ,导出 基本 的 执行 路 径 集合 ,从 而 设计 测试 用 例 的 方法 。 常 用 的 覆盖 准则 有 语句 材 
盖 、 分 支 覆 盖 和 条 件 覆 盖 等 ,这 些 准 则 对 后 面 测试 用 例 方法 的 设计 有 重要 作用 。 
2.4.4 增 量 测试 与 大 突击 测试 


增 量 测 试 (Incremental Testing) 是 指 将 程序 模块 逐步 集成 进行 测试 。 而 大 突击 测试 
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(Big Bang Testing) 是 指 将 程序 成 块 地 进行 测试 ,这 两 种 测试 方法 在 后 面 的 集成 测试 和 系 
统 测试 中 常用 。 


2.4.5 自 项 向 下 测试 与 自 底 向 上 测试 

这 两 种 测试 方法 皆 属 于 增 量 测试 。 自 底 向 上 测试 是 首先 测试 最 底层 的 模块 ,利用 畏 
助 的 驱动 模块 调用 ,然后 测试 高 层次 的 模块 。 而 自 项 向 下 测试 则 刚好 相反 , 它 首先 测试 顶 
层 模 块 ,无 须 编写 驱动 模块 ,但 要 使 用 桩 模块 ,然后 测试 下 一 层 模 块 。 
2.4.6 静态 测试 与 动态 测试 


静态 测试 (或 称 静 态 分 析 ) 不 必 运 行程 序 , 目 的 是 收集 有 关 程 序 代码 的 结构 信息 而 非 
查 错 。 而 动态 测试 则 需要 运行 程序 ,目的 是 查 错 而 非 检查 程序 代码 的 结构 信息 。 


2.4.7 性 能 测试 


人 性 能 测试 的 主要 目标 是 发 现 和 改正 性 能 缺陷 并 提高 性 能 ,大 多 数 通 过 黑 盒 测试 来 实 
现 性 能 测试 。 


2.5 回归 测试 

回归 测试 是 指 : 一 经 发 现 并 改正 了 程序 中 隐藏 的 缺陷 ,然后 再 重新 执行 以 前 发 现 这 
个 缺陷 的 测试 ,查看 此 缺陷 是 否 重 现 。 另 外 ,. 当 对 发 现 的 缺陷 进行 修改 之 后 ,执行 一 系列 
基准 测试 ,以 确认 程序 的 修改 没有 对 其 他 部 分 产生 干扰 ,这 也 称 为 回归 测试 。 
2.6 运行 和 维护 阶段 的 测试 


在 运行 和 维护 阶段 ,需要 在 运行 环境 中 对 软件 产品 进行 性 能 监视 ,可 能 还 要 进行 相应 
的 修改 。 


2.7 ”本章 小 结 


本 章 讨 论 了 软件 的 开发 阶段 ,介绍 了 规划 阶段 的 测试 .设计 阶段 的 测试 、 编 程 阶 段 的 
测试 .回归 测试 以 及 运行 和 维护 阶段 的 测试 。 


第 3 章 代码 检查 走 查 与 评审 
3.1 桌 上 检查 


3.1.1 桌 上 检查 的 检查 项 目 


桌 上 检查 是 一 种 程序 员 检查 自己 的 源 程序 的 方法 。 桌 上 检查 的 目的 是 发 现 程序 中 的 
错误 。 桌 上 检查 的 检查 项 目 主 要 有 检查 变量 、 标 号 的 交叉 引用 表 , 检 查 子 函 数 、 宏 、 函 数 ， 
等 价 性 检查 ,常量 检查 ,标准 检查 ,风格 检查 ,比较 控制 流 , 选 择 、 激 活路 径 , 补 充 文档 等 。 


3.1.2 对 程序 代码 做 静态 错误 分 析 


桌 上 检查 的 静态 分 析 分 为 两 部 分 : 生成 引用 表 和 进行 静态 错误 分 析 。 
1. 生成 各 种 引用 表 


引用 表 是 为 了 支持 后 面 对 源 代码 进行 静态 检查 , 按 功能 不 同 可 分 为 三 类 : 

可 直接 从 表 中 查 出 说 明 / 使 用 错误 ,如 循环 层次 表 、 变 量 交叉 引用 表 、 标 号 交叉 引用 
为 用 户 提供 辅助 信息 ,如 子 函数 ( 宏 函数 ) 引 用 表 、 等 价 (变量 ) 表 、 常 数 表 等 ; 

用 来 做 错误 预测 和 程序 复杂 度 计算 ,如 操作 符 和 操作 数 的 统计 表 。 

2. 进行 静态 错误 分 析 

主要 是 用 于 确定 在 源 程序 中 是 否 存 在 错误 或 危险 结构 ,通常 有 以 下 几 种 : 

。 类 型 和 单位 分 析 ; 

。 引用 分 析 ; 

。 表达 式 分 析 ; 

。 接口 分 析 。 


3.2 代码 检查 
3.2.1 特定 的 角色 和 职责 
代码 检查 小 组 通常 规模 很 小 ,一 般 人 数 为 4~7 人 不 等 。 规 模 大 的 代码 检查 小 组 主要 


检查 文档 ,小 规模 的 代码 检查 小 组 主要 检查 具体 技术 的 实现 。 小 组 人 员 的 角色 分 配 通 常 
如 下 : 


代码 检查 、 走 查 与 评审 


1. 协调 人 员 


支持 引导 代码 检查 的 执行 过 程 ,全 面 负责 代码 检查 工作 。 协 调 人 员 通 常 是 由 开发 部 
门 挑选 和 培训 的 ,并 负担 指定 开发 项 目的 代码 检查 工作 。 


2. 开发 人 员 


是 检查 项 目的 生产 者 ,主要 负责 提供 检查 项 目 资 料 和 回答 检查 人 员 的 问题 ,通常 开发 
人 员 也 是 代码 检查 的 检查 人 员 。 


3. 检查 人 员 
检查 小 组 每 一 个 人 都 可 以 认为 是 检查 人 员 ,可 兼任 不 同 的 角色 。 
4. 讲解 员 


负责 在 检查 会 议 中 讲解 检查 项 目 , 引 导 小 组 对 产品 进行 彻底 检查 。 最 佳人 选 是 相关 
文档 和 程序 代码 的 编写 者 。 


5. 记录 员 


负责 会 议 期 间 在 检查 表 上 记录 发 现 的 每 一 个 错误 ,同时 也 承担 作为 一 般 检查 人 员 的 
任务 。 


3.2.2 代码 检查 过 程 


代码 检查 (Code Inspection) ,就 是 以 小 组 为 单位 阅读 代码 ,应 用 一 系列 规程 和 错误 检 
查 技术 ,检查 实际 的 产品 ,发现 错误 和 缺陷 的 过 程 。 


3.2.3 用 于 代码 检查 的 错误 列表 


代码 检查 的 重要 部 分 就 是 对 照 错误 列表 来 检查 常见 的 错误 ,错误 列表 是 独立 于 一 般 
的 编程 语言 的 ,主要 包括 : 
。 数据 引用 错误 ; 
。 数据 声明 错误 ; 
运算 错误 ; 
。 比较 错误 ; 
控制 流程 错误 ; 
接口 错误 ; 
。 输 入 输出 错误 ; 
。 其 他 检查 。 
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3.3 走 查 
3.3.1 特定 的 角色 和 职责 


走 查 小 组 由 3 一 5 人 组 成 ,至 少 包 括 的 成 员 如 下 : 

(1) 扮演 类 似 代码 检查 过 程 中 * 协 调 人 ”的 角色 一 人 ; 

(2) 负责 记录 所 有 查 出 的 错误 的 记录 员 一 人 ; 

(3) 测试 员 一 人 。 

建议 另外 的 参与 者 有 : 

(1) 一 位 有 经 验 的 程序 员 ; 

(2) 一 位 程序 员 新 手 ; 

(3) 一 位 最 终 将 维护 程序 的 人 员 ; 

(4) 一 位 来 自 其 他 不 同 项 目的 人 员 ; 

(5) 一 位 来 自 该 软件 编程 小 组 的 程序 员 。 

在 走 查 前 , 走 查 小 组 的 各 成 员 需 要 评审 相关 资料 ,在 走 查 过 程 中 ,由 于 参与 审查 的 人 
员 中 只 有 一 人 是 程序 编写 者 ,因此 走 查 的 主要 工作 是 由 其 他 人 而 非 程 序 编写 者 完成 的 。 
走 查 小 组 秘书 的 职责 是 负责 记录 走 查 期 间 做 出 的 所 有 说 明 ,包括 发 现 的 问题 ,样式 方面 的 
错误 .遗漏 矛盾、 改进 建议 或 者 替换 解决 方法 。 


3.3.2 走 查 的 过 程 


1. 计划 走 查 会 议 


协调 人 员 应 完成 下 面 的 工作 : 

(1) 选择 一 名 或 多 名 人 员 组 成 走 查 小 组 。 
(2) 安排 走 查 会 议 的 时 间 和 地 点 。 

(3) 分 发 所 有 必需 的 材料 给 审查 人 员 。 


2. 走 查 产 品 


走 查 人 员 负 责 为 走 查 做 准备 ,并且 在 需要 的 时 候 要 完全 熟悉 标准 、 检 查 表 和 其 他 任何 
提供 的 用 于 走 查 的 信息 。 走 查 人 员 走 查 产 品 并 且 准 备 在 走 查 会 议 上 讨论 他 们 对 产品 做 出 
的 评注 .建议 .问题 。 


3. 执行 走 查 


走 查 小 组 开会 ,集体 扮演 计算 机 角色 .让 事先 准备 好 的 测试 用 例 沿 程序 的 逻辑 运行 一 
遍 , 随 时 记录 程序 的 踪迹 , 供 分 析 和 讨论 用 。 每 个 测试 用 例 都 在 人 们 脑 中 进行 推演 。 
走 查 的 优点 有 : 
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(1) 能 在 代码 中 对 错误 进行 精确 定位 ,降低 调试 成 本 ; 
(2) 可 以 发 现成 批 的 错误 ,便于 一 同 得 到 修正 。 


4. 解决 缺陷 
程序 员 和 走 查 人 员 解 决 走 查 中 发 现 的 问题 。 
5. 走 查 记 录 


记录 走 查 人 员 的 名 字 、 被 审查 的 产品 . 走 查 的 日 期 .缺陷 .遗漏 .矛盾 和 改进 建议 列表 。 
6. 产品 返工 
根据 走 查 的 记录 ,程序 员 更 新 产品 ,纠正 所 有 的 缺陷 .遗漏 ,效率 问题 和 改进 产品 。 


3.3.3 走 查 中 的 静态 分 析 技 术 


走 查 着 重 从 流程 的 角度 考察 程序 ,借助 程序 流程 图 或 调用 图 对 数据 流 和 控制 流 进行 
静态 分 析 , 调 用 图 中 ,节点 表示 程序 单元 ,有 向 边 表示 程序 单元 之 间 的 控制 和 调用 ,通过 调 
用 图 可 以 检查 程序 中 变量 的 说 明和 引用 ,全 局 变量 .参数 误 用 的 问题 ,同时 还 为 动态 测试 
用 例 的 设计 提供 可 靠 的 依据 ,在 调用 图 中 是 不 能 对 程序 进行 修改 的 。 


3.4 同行 评审 
3.4.1 为 什么 需要 评审 


同行 评审 (Peer Review) 是 一 种 通过 作者 的 同行 来 确认 缺陷 和 需要 变更 区 域 的 检查 
方法 。 评 审 的 目的 是 发 现 产品 的 缺陷 ,因此 在 评审 上 的 投入 可 以 减少 大 量 的 后 期 返工 。 
同行 评审 的 作用 非常 突出 , 既 缩 减 了 工作 时 间 ,又 节约 了 大 量 成 本 。 及 时 进行 同行 评审 不 
仅 有 利于 提高 软件 的 质量 ,而 且 可 以 进一步 提高 工程 师 的 工作 效率 。 


3.4.2 同行 评审 的 角色 和 职能 


同行 评审 的 过 程 主要 由 评审 小 组 组 织 和 进行 。 一 个 评审 小 组 主要 由 以 下 角色 构成 。 
(1) 协调 人 (评审 组 长 ): 和 作者 共同 商讨 决定 具体 的 评审 人 员 ;安排 正 式 的 评审 会 
议 ; 与 所 有 评审 人 员 举 行 一 个 准备 会 议 ,确保 所 有 的 评审 员 都 明确 他 们 的 角色 和 责任 ; 确 
会 议 的 输入 文件 都 符合 要 求 ;如果 作 者 或 者 评审 员 没有 为 即将 召开 的 评审 会 议 做 好 充 
分 的 准备 , 则 需要 重新 安排 会 议 并 通知 大 家 ;确保 大 家 的 关注 点 都 是 评审 内 容 的 缺陷 ; 确 
保 所 有 提出 的 缺陷 都 被 记录 下 来 ;跟踪 问题 的 解决 情况 ;和 项 目 组 长 沟通 评审 的 结果 。 
(2) 作者 : 确保 即将 评审 的 文件 已 经 准备 好 ;与 项 目 组 长 .协调 人 一 起 定义 评审 小 组 
的 成 员 。 
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(3) 评审 员 ( 读 者 ): 必须 具备 良好 的 个 人 能 力 。 通 常 在 评审 员 的 选择 上 应 该 包含 上 
一 级 文档 的 作者 代表 和 下 一 级 文档 的 制定 作者 。 


3.4.3 同行 评审 的 内 容 


同行 评审 涉及 的 内 容 很 多 ,主要 可 以 分 为 4 类 。 


1. 管理 评审 

管理 评审 是 对 项 目 管理 体系 的 适应 性 和 管理 活动 的 有 效 性 进行 评价 。 评 审结 果 是 提 
交管 理 评 审 报告 。 

2. 技术 评审 

技术 评审 是 对 产品 以 及 各 阶段 的 输出 内 容 进行 评估 。 目 的 是 确保 需求 说 明 、 设 计 说 


明 书 与 用 户 需求 一 致 , 并 按 计 划 对 软件 进行 正确 的 开发 。 技 术 评审 的 对 象 主要 包括 : 需 
求 文档 , 源 代码 ,测试 用 例 等 ,评审 检查 列表 、 其 他 必需 的 文档 等 。 
3. 文档 评审 


在 软件 开发 过 程 中 ,需要 进行 评审 的 文档 很 多 ,主要 包括 : 需求 评审 (用 户 需 求 规格 
说 明 、 产 品 需 求 规格 说 明 、 功 能 规格 说 明 等 ) ,设计 评审 (软件 总 体 设计 规格 说 明 .详细 设计 
规格 说 明 等 ) ,代码 评审 ,质量 验证 评审 (测试 计划 、 测 试用 例 等 )。 


4. 过 程 评审 


这 里 的 过 程 是 指 软件 开发 过 程 。 过 程 评审 的 主要 任务 是 通过 对 流程 的 控制 ,保证 
SQA 组 织 定义 的 软件 过 程 在 项 目 中 得 到 遵循 ,同时 保证 质量 .保证 方针 能 更 快 更 好 地 
执行 。 


3.4.4 评审 的 方法 和 技术 


同行 评审 方法 很 多 ,基于 正式 化 程度 可 以 分 为 以 下 几 种 。 

1. 临时 评审 

指 一 程序 员 临 时 请 另 一 程序 员 用 几 分 钟 检查 一 个 缺陷 ,这 是 最 不 正式 的 检查 方法 。 
2. 桌 上 检查 或 轮 查 

这 种 检查 方法 有 时 称 为 分 配 审查 方法 ,是 一 种 由 多 人 组 成 的 并 行 的 同行 桌 上 检查 。 
3. 结对 评审 

又 称 同行 桌 上 检查 或 伙伴 检查 。 桌 上 检查 是 指 作者 自己 检查 源 代码 ,而 结对 评审 就 
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是 除 作者 外 ,再 请 一 位 评审 员 对 产品 进行 的 桌 上 检查 。 这 是 最 便宜 的 评审 方法 。 
4. 走 查 


走 查 是 一 种 非 正式 的 评审 ,方法 主要 有 两 种 : 一 是 使 用 样品 数据 做 测试 用 例 , 二 是 按 
脚本 执行 ,通过 脚本 描述 具体 场景 ,说 明 系统 如 何在 交互 中 完成 预定 功能 。 


5. 小 组 评审 


是 一 种 “轻型 "的 审查 ,有 计划 和 结构 ,非常 接近 正式 评审 ,适用 于 不 需要 严格 审查 过 
程 的 工作 产品 。 


6. 正式 审查 

与 上 面 的 小 组 评审 很 相似 ,但 比 它 更 严格 ,是 最 系统 、 最 严密 也 最 实用 的 评审 方法 。 
3.5 本 童 小 结 

本 章 阐述 了 桌 上 检查 对 代码 静态 错误 分 析 、 代 码 检查 小 组 成 员 及 其 职责 划分 、 代 码 检 


查 的 错误 列表 、 走 查 的 步骤 、 走 查 中 的 静态 分 析 技 术 、 同 行 评审 的 角色 和 职责 、 同 行 评审 的 
内 容 以 及 同行 评审 的 方法 和 技术 。 


第 4 章 ”覆盖 率 测 试 
4.1 覆盖 率 概念 


覆盖 率 是 量度 测试 完整 性 的 一 个 工具 ,通常 可 以 分 为 逮 辑 覆盖 和 功能 覆盖 。 覆 盖 
的 计算 公式 如 下 : 
覆盖 率 = 被 执行 到 的 项 数 / 总 项 数 X 100% 
公式 中 的 “项 ” 视 不 同情 况 而 定 ,对 于 具体 准则 可 定义 它 的 语义 。 
盖 率 对 软件 测试 有 着 非常 重要 的 作用 。 和 覆盖 率 数据 可 以 指导 人 们 设计 能 够 增加 覆 
盖 率 的 测试 用 例 。 这 样 就 能 有 效 地 提高 测试 质量 ,避免 设计 无 效 的 测试 用 例 。 


4.2 ”逻辑 覆盖 


他 辑 覆 盖 是 以 程序 内 部 的 逻辑 结构 为 基础 设计 测试 用 例 的 技术 ,属于 白 盒 测试 。 根 
据 覆 盖 率 的 不 同 , 又 可 以 分 为 语句 覆盖 、 判 定 覆 盖 、 判 定 /条 件 覆 盖 、 条 件 组 合 覆 盖 和 路 径 
和 窗 盖 。 


语句 覆盖 就 是 指 设计 若干 测试 用 例 , 运 行 被 测 程序 ,使 每 个 可 执行 语句 至 少 执行 一 
次 。 它 是 最 弱 的 逻辑 覆盖 准则 。 指 令 块 覆盖 是 语句 覆盖 的 一 个 变 体 ,唯一 的 区 别 是 计算 
方式 不 同 。 指 令 块 是 函数 内 部 的 一 组 语句 ,在 这 组 语句 中 不 存在 控制 语句 ,计算 公式 
如 下 : 
语句 覆盖 率 = 被 评价 到 的 语句 数量 / 可 执行 的 语句 数量 X 100% 
指令 块 覆 盖 率 = 被 执行 的 指令 块 数量 / 程序 中 的 指令 块 总 数 X 100% 


4.2.2 判定 覆盖 


判定 覆盖 ,有 时 也 称 为 分 支 覆盖 ,就 是 指 设计 若干 测试 用 例 ,运行 被 测 程序 ,使 得 每 个 
判定 的 取 真 分 支 和 取 假 分 支 至 少 评价 一 次 。 判 定 路 径 覆 盖 是 判定 覆盖 的 一 个 变 体 , 这 里 
的 判定 路 径 是 指 一 个 语句 序列 ,其 起 始 位 置 是 程序 和 人口 或 一 个 判定 的 开始 ,结束 位 置 是 下 
一 个 判定 的 开始 或 程序 出 口 ,计算 公式 如 下 : 

判定 覆盖 率 = 被 评价 到 的 判定 分 支 个 数 / 判定 分 支 的 总 数 X 100% 

判定 路 径 覆 盖 率 (DDP) = 被 评价 到 的 判定 路 径 数 量 / 判定 路 径 的 总 数 x 100% 


4.2.3 条 件 覆盖 


条 件 覆 盖 就 是 指 设计 若干 测试 用 例 ,运行 被 测 程序 ,使 得 每 个 判定 的 每 个 条 件 的 可 能 
取 值 至 少 评价 一 次 ,计算 公式 如 下 : 
条 件 覆 盖 率 = 被 评价 到 的 条 件 取 值 的 数量 / 条 件 取 值 的 总 数 X 100% 


4.2.4 ”条件 /判定 覆盖 


条 件 /判定 覆盖 就 是 指 设计 足够 的 测试 用 例 ,使 得 判定 语句 的 每 个 条 件 的 所 有 可 能 取 
值 至 少 评价 一 次 ,同时 每 个 判定 语句 本 身 的 所 有 可 能 分 支 也 至 少 评价 一 次 ,计算 公式 
如 下 : 
条 件 /判定 覆盖 率 = 被 评价 到 的 条 件 取 值 和 判定 分 支 的 数量 /( 条 件 取 值 总 数 十 
判定 分 支 总 数 ) X 100% 


4.2.5 条 件 组 合 覆盖 


条 件 组 合 覆 盖 就 是 指 设计 足够 的 测试 用 例 ,使 得 每 个 判定 的 所 有 可 能 条 件 取 值 至 少 
评价 一 次 ,计算 公式 如 下 : 
条 件 组 合 覆盖 率 = 被 评价 到 的 条 件 取 值 组 合 的 数量 /条 件 取 值 组 合 的 总 数 X 100% 


4.2.6 ”路 径 覆 盖 


路 径 覆 盖 就 是 指 设计 足够 的 测试 用 例 , 执 行程 序 中 所 有 可 能 的 路 径 。 基 于 路 径 覆 盖 
的 测试 是 最 强 的 覆盖 测试 ,但 是 路 径 覆 盖 并 不 一 定 能 包含 判定 /条 件 覆盖 ,计算 公式 如 下 : 
路 径 覆 盖 率 = 被 执行 到 的 路 径 数 量 /程序 中 的 路 径 总 数 X 100% 


4.2.7 ESTCA 覆盖 


Foster 通过 大 量 的 实验 确定 了 程序 中 谓词 最 容易 出 错 的 部 分 ,得 出 一 套 错误 敏感 测 
试用 例 分 析 规 则 : 

规则 1 对 于 A rel B(rel 可 以 是 二 ,= 和 二 ) 型 的 分 支 谓 词 ,应 适当 地 选择 A 与 B 的 
值 , 使 得 测试 执行 到 该 分 支 语句 时 ,A<B、A=B、A>>B 的 情况 分 别 出 现 一 次 。 

规则 2 对 于 A rel C(rel 可 以 是 二 或 二 ,A 是 变量 ,C 是 常量 ) 型 的 分 支 谓 词 , 当 rel 
为 二 时 ,应 适当 地 选择 A 的 值 ,使 得 A 二 C 一 M(M 是 距 C 最 小 的 容许 正 数 ,车 A 和 C 均 
为 整 型 时 ,M=1) 。 同 样 , 当 rel 为 之 时 ,应 适当 地 选择 A 的 值 , 使 得 A 一 C 十 M。 

规则 3 ”对 外 部 输入 变量 赋值 ,使 其 在 每 一 测试 用 例 中 均 有 不 同 的 值 与 符号 ,并 与 同 
一 组 测试 用 例 中 其 他 变量 的 值 与 符号 不 一 致 。 
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4.2.8 LCSAJ 覆盖 


一 个 LCSAJ 是 一 组 顺序 执行 的 代码 ,以 控制 流 跳 转 为 其 结束 点 , 它 的 定义 如 下 : 
它 起 始 于 程序 的 入 口 或 者 一 个 可 能 导致 控制 流 跳 转 的 点 ; 

它 结束 于 程序 的 出 口 或 者 一 个 可 能 导致 控制 流 跳 转 的 点 ; 

对 于 该 点 ,一 个 跳 转 在 后 面 的 序列 中 产生 。 

LCSAJ 覆盖 准则 是 一 个 分 层 的 覆盖 准则 : 

【第 一 层 】〗 语 句 覆盖 ， 

【第 二 层 〗 分 支 覆盖 ， 

【第 三 层 】LCSAJ 覆盖 ; 

【第 四 层 】 两 两 LCSAJ 覆盖 ; 


【第 +2 层 】 每 个 首尾 相连 的 LCSAJ 组 合 在 测试 中 都 要 经 历 一 次 。 
4.3 路 径 测试 
4.3.1 分 支 结构 的 路 径 测试 


分 支 结构 有 两 种 : 嵌 套 型 分 支 结构 和 串联 型 分 支 结构 。 

对 于 典 套 型 分支 结构 , 若 有 宛 个 判定 语句 , 则 存在 十 1 条 不 同 的 路 径 , 需 要 "十 1 个 
测试 用 例 来 覆盖 它 的 每 一 条 路 径 。 

对 于 串联 型 分 支 结 构 , 若 及 个 判定 语句 , 则 存在 2n 条 不 同 的 路 径 , 因 此 需要 2n 个 
测试 用 例 来 覆盖 它 的 每 一 条 路 径 。 当 n 较 大 时 ,路 径 数 会 达 天 文 数字 ,无 法 完成 测试 。 此 
时 为 减少 测试 用 例 数目 ,可 以 采用 正 交 实 验 设计 法 来 设计 测试 用 例 , 测 试 路 径 数目 可 从 
1 二 2n 减 到 2 十 1 一 22 条 。 正 交 实验 设计 法 的 具体 步骤 如 下 : 

(1) 设 串 联 型 分 支 结 构 中 及 个 判定 语句 ,计算 满足 关系 式 n 十 1 二 2” 的 最 小 自然 
数 m。 

(2) 设 1 二 2", 取 正 交 表 L, ,并 利用 它 设计 测试 数据 。 

其 中 正 交 表 的 构造 方法 如 图 4-1 所 示 。 


4.3.2 循环 结构 的 路 径 测试 
循环 分 为 4 种 不 同类 型 : 简单 循环 、 嵌 套 循环 、 连 锁 循 环 和 非 结构 循环 , 见 图 4-2。 


1. 简单 循环 
对 于 简单 循环 ,测试 应 包括 以 下 几 种 (n 表示 循环 允许 的 最 大 次 数 ) 。 
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12 | 1 汪 攻 醒 证 本 能 : Ei 2 信人 
1 |0 1 1 1 1 1 
: |， 2 2 1 2 | 
一 一 一 上 一 一 上 -一 一 上 一 一 La | 0 1 Z4 
3 | 0 3 1 1 
鳌 | 1 1 五 1 
4 ! |! A Se | 
1 1 
5 1 1 
| | 
| 
这 1 1 
| 1 
8 | 
图 4-1 正 交 表 的 构造 方法 
下 
(a) 简单 循环 (b) 嵌 套 循环 (c) 连锁 循环 (d) 非 结构 循环 
图 4-2 循环 类 型 


(1) 0 次 循环 : 从 循环 入 口 直接 到 出 口 ; 
(2) 1 次 循环 : 查找 循环 初始 值 方面 的 错误 ; 
(3) 2 次 循环 : 检查 多 次 循环 时 才能 暴露 的 错误 ; 


(4) m 次 循环 : 


m<n, 也 是 检测 在 多 次 循环 时 才能 暴露 的 错误 ; 


(5) 最 大 次 数 循环 、 比 最 大 次 数 多 一 次 的 循环 、 比 最 大 次 数 少 一 次 的 循环 。 


2. 幅 套 循环 


对 于 嵌 套 循环 ,给 出 一 种 有 助 于 减少 测试 数目 的 测试 方法 如 下 : 

(1) 除 最 内 层 循环 外 ,从 最 内 层 循环 开始 , 置 所 有 其 他 层 的 循环 为 最 小 值 。 
(2) 最 内 层 循环 做 简单 循环 的 全 部 测试 。 
(3) 逐步 外 推 ,对 其 外 面 一 层 循环 进行 测试 。 
(4) 反复 进行 ,直到 所 有 各 层 循环 测试 完毕 。 
(5) 对 全 部 各 层 循环 同时 取 最 小 循环 次 数 ,或 者 同时 取 最 大 循环 次 数 。 
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3. 连锁 循环 

若 各 个 循环 相互 独立 , 则 连锁 循环 测试 方法 同 简单 循环 ; 若 几 个 循环 不 是 互相 独立 
的 , 则 测试 方法 同谋 套 循环 。 

4. 非 结构 循环 


对 于 非 结构 循环 ,要 使 用 结构 化 程序 设计 方法 重新 设计 测试 用 例 。 
4.3.3 ZZ 路 径 覆 盖 与 基本 路 径 测 试 


1. 程序 的 控制 流 图 


控制 流 图 是 描述 程序 控制 流 的 一 种 图 示 方法 ,其 中 控制 流 图 中 的 箭头 称 为 边 ,表示 控 
制 流 的 方向 ,一 条 边 必须 终止 于 一 个 节点 , 边 与 节点 圈定 的 空间 称 为 区 域 , 当 对 区 域 计 数 
时 ,图 形 外 的 空间 也 应 记 为 一 个 区 域 。 程 序 流程 图 可 以 转换 为 控制 流 图 ,如 图 4-3 所 示 。 
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(a) 程序 流程 图 (b) 控制 流 图 
图 4-3 程序 流程 图 和 控制 流 图 


由 控制 流 图 可 以 得 到 区 域 数 为 4。 
2. 程序 的 环 路 复杂 性 


环 路 复杂 性 (又 称 圈 复杂 度 ) 是 对 程序 逻辑 结构 所 做 的 一 种 定量 量度 。 环 路 复杂 性 的 
求法 如 下 : 

@ 将 环 路 复杂 性 定义 为 控制 流 图 中 的 区 域 数 。 

@ 控制 流 图 G 的 环 路 复杂 性 记 为 V(G), 则 V(G) 二 E 一 N 十 2, 其 中 记 为 边 数 ,N 为 
图 中 节点 总 数 。 
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@V(c)=P 十 1, 其 中 也 表示 控制 流 图 中 的 判定 节点 数 。 
3. 基本 路 径 测试 方法 设计 测试 用 例 


基本 路 径 测 试 是 在 控制 流 图 的 基础 上 ,通过 分 析 环 路 复杂 性 ,导出 基本 可 执行 路 径 的 
集合 ,从 而 设计 测试 用 例 的 方法 。 描 述 这 种 路 径 覆 盖 的 准则 就 是 Z 路 径 覆 盖 。 

基本 路 径 测 试 方法 适用 于 模块 的 详细 设计 和 源 程 序 , 下 面 以 选择 排序 程序 
SelectSort 为 例 ,说 明 具 体 测试 用 例 设计 过 程 : 


void selectSort(int V[],int n) { 
for(int i=0;i<n-1;it++) { 
int =i; 
for(int 计 计 1?]J<n?j++) 
i£WD]<VK) Ej; 
if(k!=i) { int work=V[i];V[i]=V[k];V[kK]=work;} 
} 
} 


(1) 以 详细 设计 或 源 代码 作为 基础 ,导出 程序 的 控制 流 图 ,即将 上 述 程序 转换 为 如 
图 4-4 所 示 的 控制 流 图 ,用 数字 标号 标识 各 个 控制 流 。 


Ej WI<->W] 


1 1 


FH 上 = iitl 


4-4 ”SelectSort 程序 的 控制 流 图 


(2) 计算 得 到 的 控制 流 图 G 的 环 路 复杂 性 V(G)。 
对 控制 流 图 4-4, 可 以 多 种 算法 求 V(G): 
V(G) == 5( 区 域 数 ) 
V(G) = 14( 边 数 ) 一 11( 节 点 数 ) = 二 5 
V(G) = 4( 判 定 节点 数 ) 二 1 = 二 5 
(3) 确定 线性 无 关 的 路 径 的 基本 集 。 根 据 环 路 复杂 性 为 5, 可 确定 该 图 有 5 条 线性 无 
关 的 基本 路 径 集 ,分 别 如 下 。 
Pathl: 1 一 3 
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Path2: 1 一 2 一 5 一 8 一 … 

Path3: 1 一 2 一 5 一 9 一 … 

Path4: 1 一 2 一 4 一 6 一 … 

Path5 : 1 一 2 一 4 一 7 一 … 

(4) 生成 测试 用 例 ,确保 基本 路 径 集中 每 条 路 径 的 执行 。 根 据 判定 节点 给 出 的 条 件 
选择 适当 的 数据 以 保证 某 一 条 路 径 可 以 被 测试 到 。 满 足 上 面 基本 路 径 集 的 测试 用 例 
如 下 。 

Pathl: 1 一 3, 取 "一 1。 

Path2: 1 一 2 一 5 一 8 一 3, 取 "一 2; 预 期 结果 : 路 径 5 一 8 一 3 不 可 到 达 。 

Path3: 1 一 2 一 5 一 9 一 3, 取 n= 二 2; 预 期 结果 : 路径 5 一 9 一 3 不 可 到 达 。 

Path4:; 1 一 2 一 4 一 6 一 5 一 8 一 3, 取 n= 二 2,V[0]==2,V[1]==1; 预 期 结果 : &==1,V[0]= 
1,V[1]=2。 

Path4: 1 一 2 一 4 一 6 一 5 一 9 一 3, 取 n= 二 2,V[0]==2,V[1]==1; 预 期 结果 ;有 = 二 1, 路 径 
9 一 3 不 可 到 达 。 

Path5 : 1 一 2 一 4 一 7 一 5 一 8 一 3, 取 "一 2,V[0]=2,V[1]=1; 预 期 结果 :一 0, 路 径 
8 一 3 不 可 到 达 。 

Path5 : 1 一 2 一 4 一 7 一 5 一 9 一 3, 取 "一 2,V[0]=2,V[1]=1; 预 期 结果 :, k= 二 0,V[0]= 
1,V[1]=2。 


4.4 数据 流 测 试 


4.4.1 定义 /使 用 测试 的 几 个 定义 


1. 定义 节点 


节点 n 是 变量 v 的 定义 节点 , 当 且 仅 当 变量 w 的 值 在 节点 对 应 的 语句 中 定义 , 记 作 
DEF(Cu,z) 。 


2. 使 用 节点 


节点 是 变量 v 的 使 用 节点 , 当 且 仅 当 变量 v 的 值 在 节点 对 应 的 语句 中 使 用 , 记 作 
USE(Cu,z) 。 


3. 谓词 使 用 
使 用 节点 USE(v,n) 是 一 个 谓词 使 用 , 当 且 仅 当 是 谓词 语句 , 记 作 P-use。 
4. 定义 /使 用 路 径 


路 径 上 存在 变量 v 的 定义 节点 DEF(v,m) 和 使 用 节点 USE(v,n), 且 m 和 nn 是 该 路 
径 的 最 初 节点 和 终止 节点 , 则 这 条 路 径 称 为 v 的 定义 -使 用 路 径 , 记 作 du-path。 
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5. 定义 清除 路 径 
在 定义 /使 用 路 径 中 仅 存 在 一 个 v 的 定义 节点 , 则 是 定义 清除 路 径 , 记 作 dc-path。 


4.4.2 定义 /使 用 路 径 测 试 覆盖 指标 


(1) 全 定义 准则 。 

(2) 全 使 用 准则 。 

(3) 全 谓词 使 用 /部 分 计算 使 用 准则 。 
(4) 全 计算 使 用 /部 分 谓词 使 用 准则 。 
(5) 全 定义 /使 用 路 径 准 则 。 


4.5 ”基于 覆盖 的 测试 用 例 选 择 
4.5.1 如 何 使 用 覆盖 率 


原则 1: 覆盖 率 不 是 目的 ,只 是 一 种 手段 。 因 为 测试 的 主要 目的 还 是 尽 可 能 地 去 发 现 

原则 2: 不 可 能 针对 所 有 的 覆盖 率 指标 去 进行 测试 ,相反 ,如 果 只 考虑 一 种 禾 盖 率 指 
标 也 是 不 恰当 的 。 

原则 3: 不 要 追求 绝对 100% 的 覆盖 率 。 


4.5.2 使 用 最 少 测试 用 例 来 达到 覆盖 


1. 结构 化 程序 的 三 种 基本 控制 结构 


顺序 型 ,构成 串 行 操作 ; 
选择 型 ,构成 分 支 操作 ; 
重复 型 ,构成 循环 操作 。 


2. 如 何 计 算 最 少 测试 用 例 数目 


一 般 的 程序 是 由 上 面 三 种 控制 结构 嵌 套 组 合 而 成 的 ,比较 复杂 ,但 估算 最 少 测试 用 例 
的 原则 一 致 。 主 要 采取 结构 化 分 解 的 方法 进行 ,使 问题 得 以 简化 ,如 图 4-5 所 示 。 

图 4-5 是 表示 两 个 顺序 执行 的 分 支 结构 ,分 支 谓词 P, 和 P, 取 不 同 值 时 ,分 别 执行 a 
或 5 及 c 或 d 操作 ,显然 测试 该 程序 ,至 少 要 提供 4 个 测试 用 例 才 能 做 到 路 径 覆 盖 , 即 ac、 
ad .bc 、bd 操作 均 能 覆盖 到 。 下 面 看 这 个 最 小 值 4 的 由 来 : 首先 可 以 看 出 ,分 支 谓词 已 
引出 两 个 操作 ,及 分 支 谓 词 P, 引出 两 个 操作 ,组 合 起 来 得 到 2X2 二 4。 这 里 的 2 实际 上 
是 由 于 两 个 并 列 的 操作 1 十 1 一 2 得 到 的 。 
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图 4-5 两 个 串联 的 判定 结构 


4.6 本 章 小 结 


本 章 阐述 了 覆盖 率 概念 、 各 种 多 辑 覆 盖 测 试 的 计算 公式 `.Z 路 径 覆 盖 ( 包 括 程序 控制 
流 图 和 程序 环 路 复杂 性 计算 的 三 种 方法 ) 数据 流 测试 的 相关 定义 以 及 满足 路 径 覆 盖 的 最 
少 测试 用 例 选 择 方法 。 
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5.1 等 价 类 测试 
5.1.1 等 价 类 的 概念 


所 谓 等 价 类 ,是 指 某 个 输入 域 的 子 集合 ,在 该 子 集合 中 ,各 个 输入 数据 对 于 揭露 程序 
中 的 错误 是 等 效 的 , 故 通常 假设 测试 某 等 价 类 的 代表 值 就 等 价 于 对 这 一 类 其 他 值 的 测试 。 
等 价 类 有 两 种 : 

(1) 有 效 等 价 类 。 是 指 对 程序 的 规格 说 明 来 说 是 合理 的 .有 意义 的 输入 数据 构成 的 
集合 ,利用 它 检验 程序 是 否 实现 了 预先 规定 的 功能 和 性 能 。 

(2) 无 效 等 价 类 。 是 指 对 程序 的 规格 说 明 来 说 是 不 合理 的 、 无 意义 的 输入 数据 构成 
的 集合 ,利用 它 检 查 程序 的 功能 和 性 能 的 实现 是 否 有 不 符合 规格 说 明 的 地 方 。 

等 价 类 测试 是 一 种 十 分 实用 的 黑 盒 测 试 方法 ,设计 测试 用 例 通常 要 经 过 划分 等 价 类 
和 选取 测试 用 例 两 步 。 


5.1.2 等 价 类 测试 的 类 型 


(1) 弱 一 般 等 价 类 测试 一 一 是 指 测 试用 例 的 设计 是 通过 从 每 个 等 价 类 (区 间 ) 选 择 一 
个 值 来 实现 的 。 所 谓 “ 弱 ”, 是 指 从 各 个 等 价 类 中 选择 值 时 只 考虑 等 价 类 自身 。 

(2) 强 一 般 等 价 类 测试 一 一 是 指 设计 测试 用 例 时 需要 考虑 等 价 类 之 间 的 相互 作用 ， 
选取 等 价 类 的 笛 卡 儿 积 的 元 素 值 来 实现 。 所 谓 “ 强 ”, 是 指 考虑 了 等 价 类 之 间 的 相互 影响 。 

(3) 弱 健 壮 性 等 价 类 测试 一 一 这 种 测试 考虑 了 从 无 效 等 价 类 取 值 , 即 传统 的 等 价 类 

(4) 强健 壮 性 等 价 类 测试 一 一 这 种 测试 也 考虑 了 从 无 效 等 价 类 取 值 , 同 时 考虑 了 多 
个 等 价 类 之 间 的 相互 影响 ,从 所 有 等 价 类 笛 卡 儿 积 的 每 个 元 素 中 获得 测试 用 例 。 


5.1.3 等 价 类 测试 的 原则 


(1) 如 果 输 入 条 件 规定 取 值 范围 或 值 的 个 数 , 则 可 确定 一 个 有 效 等 价 类 和 两 个 无 效 
等 价 类 。 

(2) 如 果 输 入 条 件 规定 输入 值 的 集合 , 则 可 确定 一 个 有 效 等 价 类 和 一 个 无 效 等 价 类 。 

(3) 如 果 规 定 了 输入 数据 的 一 组 值 , 且 程序 要 对 每 个 输入 值 分 别处 理 , 这 时 可 为 每 个 
输入 值 确立 一 个 有 效 等 价 类 ,此 外 针对 这 组 值 确立 一 个 无 效 等 价 类 。 

(4) 如 果 规 定 了 输入 数据 必须 遵守 的 规则 , 则 可 确立 一 个 有 效 等 价 类 和 若干 个 无 效 
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等 价 类 (从 不 同 角度 违反 规则 ) 。 
(5) 若 确 知已 划分 的 等 价 类 中 各 元 素 的 处 理 方式 不 同 , 则 进一步 对 等 价 类 进行 划分 。 


5.1.4 等 价 类 方法 测试 用 例 设计 举例 


(1) 以 语言 标识 符 规格 说 明 为 例 , 设 计 这 一 问题 的 测试 用 例 。 

在 某 一 版 本 的 编程 语言 中 对 语言 标识 符 规格 作 以 下 规定 :“ 标 识 符 是 由 以 字母 开头 ， 
后 跟 字 母 或 数字 的 任意 组 合 构成 的 。 编 译 器 能 够 区 分 的 有 效 字符 数 为 8 个 ,最 大 字符 数 
为 80 个 ”, 并 且 规 定 :“ 标 识 符 必须 先 声 明 , 后 使 用 ”“ 在 同一 声明 语句 中 ,标识 符 至 少 必 
须 有 一 个 ”。 

为 了 用 等 价 类 划分 的 方法 得 到 上 述 规格 说 明 所 规定 的 要 求 , 本 着 上 述 的 划分 原则 , 建 
立 输 入 等 价 类 表格 ,如 表 5-1 所 示 。 


表 5-1 等 价 类 表格 
输入 条 件 有 效 等 价 类 无 效 等 价 类 
标识 符 个 数 1 个 (1) ,多 个 (2) 0 个 (3) 
标识 符 字符 个 数 1~8 个 (4) 0 个 (5) ,>8 个 (6) ,>80 个 (7) 
标识 符 组 成 字母 (8) ,数字 (9) 非 字母 数字 字符 (10) ,保留 字 (11) 
标识 符 第 一 个 字符 字母 (12) 非 字 母 (13) 
标识 符 使 用 先 说 明 后 使 用 (14) 未 说 明 已 使 用 (15) 


根据 上 述 等 价 类 表格 ,设计 覆盖 上 述 所 有 等 价 类 的 测试 用 例如 下 。 


有 效 等 价 类 。 
QD VAR x,T1234567: REAL; } 覆 盖 (1) ,(2),(4),(8),(9),(12),(14) 等 价 类 
© BEGIN x: =3. 414; T1234567; 一 2.732;… 
无 效 等 价 类 。 
QD VAR: REAL; }0 个 标识 符 ,覆盖 (3) 等 价 类 
© VAR x,: REAL; } 标 识 符 0 个 字符 ,覆盖 (5) 等 价 类 
@ VAR T12345678;T12345679: REAL; “”} 标 识 符 多 于 8 个 字符 ,覆盖 (6) 等 价 类 
@ VAR T12345.…;REAL; } 标 识 符 多 于 80 个 字符 ,覆盖 (7) 等 价 类 
© VAR T$: CHAR; } 标 识 符 有 非法 字符 ,覆盖 (10) 等 价 类 
©@ VAR GOTO: INTEGER:; } 标 识 符 为 保留 字 , 覆 盖 (11) 等 价 类 
©® VAR 2T: REAL; } 标 识 符 以 非 字母 开头 ,覆盖 (13) 等 价 类 
VAR PAR: REAL; 
BEGIN… 
PAP: =SIN(3. 14 * 0. 8)/6; } 标 识 符 未 声明 就 使 用 ,覆盖 (15) 等 价 类 


(2) 以 三 角形 问题 为 例 , 设 计 测试 用 例 。 
在 描述 三 角形 问题 时 ,可 能 出 现 的 输出 为 : 非 三 角形 、 不 等 边 三 角形 、 等 腰 三 角形 和 
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等 边 三 角形 ,可 以 根据 这 些 输出 标识 得 到 以 下 的 输出 等 价 类 

R1= (二 abc 之: 有 三 条 边 a. 和 c 的 等 边 三 角形 } 
R2 = { 二 abc 之 : 有 三 条 边 a、b 和 c 的 等 腰 三 角形 } 
R3 二 { 王 a'pc 二 : 有 三 条 边 ae 和 c 的 不 等 边 三 角形 } 
R4 二 { 一 apce 二 : 三 条 边 a.b 和 c 不 构成 三 角形 } 
根据 上 面 的 等 价 类 设计 弱 一 般 测 试用 例 ,如 表 5-2 所 示 。 

表 5-2 弱 一 般 等 价 类 测试 用 例 


测试 用 例 a b < 预期 输出 
WN1 5 5 5 等 边 三 角形 , 属 等 价 类 R1 
WN2 » 2 3 等 腰 三 角形 , 属 等 价 类 R2 
WN3 3 4 5 不 等 边 三 角形 , 属 等 价 类 R3 
WN4 4 1 2 非 三 角形 , 属 等 价 类 R4 


由 于 变量 we 和 c 的 取 值 需 考虑 输入 数据 的 组 合 问 题 , 则 强 一 般 等 价 类 测试 用 例 与 


弱 一 般 等 价 类 测试 用 例 相同 。 


考虑 到 a、b 和 * 的 无 效 值 ,设计 追加 的 弱 健 壮 等 价 类 测试 用 例如 表 5-3、 表 5-4 所 示 。 
表 5-3 追加 的 弱 健壮 等 价 类 测试 用 例 ( 针 对 无 效 等 价 类 ) 


测试 用 例 a b < 预期 输出 
WR1 一 1 5 5 a 取 值 不 在 所 允许 的 取 值 值 域内 
WR2 5 一 5 5 取 值 不 在 所 允许 的 取 值 值 域内 
WR3 5 5 一 1 c 取 值 不 在 所 允许 的 取 值 值 域内 
WR4 201 5 5 a 取 值 不 在 所 允许 的 取 值 值 域内 
WR5 5 201 5 5 取 值 不 在 所 允许 的 取 值 值 域内 
WR6 5 5 201 < 取 值 不 在 所 允许 的 取 值 值 域内 
表 5-4 追加 的 强健 壮 等 价 类 测试 用 例 (不 良 输入 ) 

测试 用 例 a b c 预期 输出 
SR1 = 5 5 a 取 值 不 在 所 允许 的 取 值 值 域内 
SR2 5 一 1 5 5 取 值 不 在 所 允许 的 取 值 值 域内 
SR3 所 5 一 1 c 取 值 不 在 所 允许 的 取 值 值 域内 
SR4 = = 5 a.b 取 值 不 在 所 允许 的 取 值 值 域内 
SR5 5 一 站 一 中 bc 取 值 不 在 所 允许 的 取 值 值 域内 
SR6 = 5 = a.c 取 值 不 在 所 允许 的 取 值 值 域内 
SR7 = 一 和 = a,b.c 取 值 不 在 所 允许 的 取 值 值 域 内 
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5.2 边界 值 分 析 
5.2.1 边界 值 分 析 的 概念 


边界 值 是 指 对 输入 等 价 类 和 输出 等 价 类 而 言 , 位 于 其 边界 的 值 , 或 稍 高 于 边界 的 值 及 
稍 低 于 边界 的 值 这 样 一 些 特定 情况 。 

使 用 边界 值 测试 法 设计 测试 用 例 时 ,首先 应 确定 边界 情况 ,通常 输入 等 价 类 与 输出 等 
价 类 的 边界 就 是 应 着 重 测试 的 边界 情况 。 应 当选 取 正 好 等 于 .刚刚 大 于 或 刚刚 小 于 边界 
的 值 作为 测试 数据 。 


5.2.2 选择 测试 用 例 的 原则 


(1) 如 果 输 入 条 件 规定 值 的 范围 , 则 应 取 刚 达 到 这 个 范围 的 边界 的 值 , 以 及 刚刚 超越 
这 个 范围 边界 的 值 作为 测试 输入 数据 。 

(2) 如 果 输 入 条 件 规定 值 的 个 数 , 则 用 最 大 个 数 、 最 小 个 数 、 比 最 大 个 数 多 1、 比 最 小 
个 数 少 1 的 数 作为 测试 数据 。 

(3) 根据 规格 说 明 的 每 个 输出 条 件 ,使 用 前 面 的 原则 (1) 。 

(4) 根据 规格 说 明 的 每 个 输出 条 件 ,使 用 前 面 的 原则 (2) 。 

(5) 如 果 程 序 规格 说 明 中 给 出 的 输入 域 或 输出 域 是 有 序 集合 , 则 选取 集合 中 的 第 一 
个 元 素 和 最 后 一 个 元 素 作为 测试 用 例 。 

(6) 如 果 程 序 中 使 用 了 内 部 数据 结构 , 则 应 当选 择 这 个 内 部 数据 结构 的 边界 上 的 值 
作为 测试 用 例 。 

(7) 分 析 规 格 说 明 , 找 出 其 他 可 能 的 边界 条 件 。 


5.2.3 ”边界 值 方法 测试 用 例 设计 举例 


通常 情况 下 ,软件 测试 所 包含 的 边界 测试 有 以 下 几 种 类 型 : 数字 字符、 位 置 .质量 、 
大 小 .速度 .方位 .尺寸 .空间 等 。 相 应 地 ,以 上 类 型 的 边界 值 应 该 在 : 最 大 /最 小 .首位 / 末 
位 、 上 /下 、 最 快 /最 慢 、 最 高 /最 低 、 最 短 /最 长 、 空 / 满 等 情况 。 
对 上 述 几 种 边界 情况 设计 测试 用 例 的 思路 ,如 表 5-5 所 示 。 
表 5-5 利用 边界 值 作为 测试 数据 的 例子 
项 边 界 值 测试 用 例 的 设计 思路 


假设 一 个 文本 输入 区 域 允许 1 一 255 个 字符 ,输入 第 1 个 和 第 255 个 
字符 作为 有 效 等 价 类 ;输入 第 0 个 和 第 256 个 字符 作为 无 效 等 价 类 ， 
这 几 个 数值 都 属于 边界 条 件 值 


起 始 一 1 个 字符 /结束 


字符 | 十 1 个 字符 
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续 表 


项 边 界 值 测试 用 例 的 设计 思路 


例如 软件 要 求 数 据 的 输入 域 需要 输入 9 位 数据 ,可 以 使 用 最 简单 的 
数值 | 开始 位 一 1/ 结 束 位 十 1 | 00000-0000 作为 最 小 和 99999-9999 作为 最 大 值 , 然 后 刚好 使 用 小 于 


9 位 和 大 于 9 位 的 数值 来 作为 边界 条 件 
空间 小 于 空余 空间 一 点 /大 | 例如 在 做 软盘 的 数据 存储 时 ,使 用 比 最 小 剩余 磁盘 空间 大 一 点 的 文 
于 满 空间 一 点 件 作为 最 大 值 检验 的 边界 条 件 


5.3 基于 判定 表 的 测试 
5.3.1 判定 表 的 概念 


判定 表 (Decision Table) ,最 适合 描述 在 多 个 馆 辑 条 件 取 值 的 组 合 所 构成 的 复杂 情况 
下 ,分 别 要 执行 哪些 不 同 的 动作 。 判 定 表 由 4 个 部 分 组 成 ,分 别 是 : 

条 件 桩 (Condition Stub) 一 一 左上 部 分 , 列 出 各 种 可 能 的 单个 条 件 。 

动作 桩 (Action Stub) 一 一 左下 部 分 , 列 出 可 能 采取 的 单个 动作 。 

条 件 项 (Condition Entry) 一 一 右上 部 分 ,针对 各 种 条 件 给 出 多 组 条 件 取 值 的 组 合 。 

动作 项 (Action Entry) 一 一 右 下 部 分 ,指出 在 条 件 项 的 各 组 取 值 组 合 下 应 采取 的 动作 。 

判定 表 分 有 限 条 目 判 定 表 和 扩展 条 目 判 定 表 两 大 类 ,把 所 有 条 件 都 是 二 元 条 件 的 判 
定 表 称 为 有 限 条 目 判定 表 ; 若 条 件 可 以 有 多 个 值 , 则 对 应 的 判定 表 称 扩 展 条 目 判 定 表 。 

使 用 判定 表 设 计 测试 用 例 , 可 以 保证 测试 的 严密 性 和 完备 性 。 


5.3.2 基于 判定 表 的 测试 用 例 设 计 举 例 


在 供应 商业 务 处 理 中 ,有 一 个 “检查 订货 单 ”的 功能 ; 当 客 户 订货 款项 大 于 5000 元 时 ， 
如 果 客 户 拖欠 款 超过 60 天 ,向 客户 发 一 份 拒绝 供 货 备 忘 录 , 在 客户 没有 还 清 货款 前 不 发 
供 货 单 ;如 果 客 户 拖欠 款 没 有 超过 60 天 ,可 以 发 供 货 单 。 如 果 客 户 订货 款项 没有 超过 
5000 元 ,而 客户 拖欠 款 超过 60 天 , 仍 可 以 发 供 货 单 但 还 要 发 一 份 催 款 通 知 单 ;如 果 客 户 
拖欠 款 没 有 超过 60 天 ,可 以 发 供 货 单 。 
将 上 述 关 系 用 判定 表 来 表示 ,如 表 5-6 所 示 。 
表 5-6 ”供应 商 判定 表 


规则 1 规则 2 规则 3 规则 4 
cl: 订货 单 金额 二 5000 元 于 王 F F 
c2: 拖欠 货款 时 间 二 60 天 T F 涂 F 
al: 发 拒绝 供 货 备 忘 录 Y N N N 
a2: 发 供 货 单 N Y 区 次 
a3: 发 催 款 通知 单 N N 晶 N 


《软件 测试 理论 与 技术 》 


5.4 基于 因果 图 的 测试 
5.4.1 因果 图 的 适用 范围 


前 面 等 价 类 测试 和 边界 值 测试 方法 都 是 看 重 输入 条 件 的 ,但 对 于 输入 条 件 之 间 的 联 
系 考虑 不 多 。 若 必须 考虑 多 种 条 件 的 组 合 , 相 应 地 产生 多 个 动作 的 方法 来 设计 测试 用 例 ， 
需要 利用 因果 图 测试 法 。 


5.4.2 用 因果 图 生成 测试 用 例 


基于 因果 图 方法 设计 测试 用 例 的 基本 步骤 如 下 : 

(1) 根据 规格 说 明 , 分 析 和 确定 原因 和 结果 ,并 给 每 个 原因 和 结果 赋予 一 个 标识 符 。 

(2) 分 析 规 格 说 明 描述 的 语义 , 找 出 原因 与 结果 之 间 、 原 因 与 原因 之 间 的 对 应 关系 ， 
根据 这 些 关 系 画 出 因果 图 。 

(3) 由 于 语法 和 环境 限制 ,有 些 原因 和 原因 之 间 , 结 果 和 结果 之 间 的 组 合 不 可 能 出 
现 ,可 在 因果 图 上 用 一 些 记 号 表明 约束 和 限制 条 件 。 

(4) 把 因果 图 转换 成 判定 表 。 

(5) 根据 判定 表 的 每 一 列 ,设计 测试 用 例 。 


5.4.3 因果 图 法 测试 用 例 设 计 举 例 


在 因果 图 中 ,有 4 种 符号 , 即 恒 等 , 非 \ 或 .与 ,如 图 5-1 所 示 。 


cl cl 


5-1 因果 图 的 图 形 符号 


在 实际 问题 中 ,输入 状态 或 输出 状态 之 间 还 可 能 存在 某 些 依赖 关系 , 称 为 “约束 ”。 在 
因果 图 中 的 约束 符号 主要 有 5 类 ,如 图 5-2 所 示 。 

用 该 方法 时 ,要 将 规格 说 明 分 解 成 可 以 操作 的 块 ,鉴别 因 和 果 , 制 作 因果 图 , 注 明 限 
制 ,说明 不 会 出 现 因 / 果 组 合 ,然后 按 顺 序 跟踪 因果 图 中 的 状态 条 件 ,将 因果 图 转换 为 有 限 
判定 表 , 表 中 的 每 列 代 表 一 个 测试 用 例 ,最 后 将 判定 表 的 各 列 转换 为 测试 用 例 。 

基于 因果 图 方法 设计 测试 用 例 的 基本 步骤 如 下 : 

(1) 分 析 具 体 问 题 , 列 出 所 有 的 原因 和 结果 ,并 给 每 个 原因 和 结果 赋予 一 个 标识 符 。 

(2) 进一步 分 析 语 义 , 找 出 原因 与 结果 之 间 、 原 因 与 原因 之 间 的 对 应 关系 ,根据 这 些 
关系 画 出 因果 图 。 
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ee 


(a) E( 互 奈 ) (b) !( 包 含 ) (c) O( 唯 一 ) (d) R( 要 求 ) (e) M( 屏 蔽 ) 
图 5-2 因果 图 的 约束 符号 


(3) 由 于 语法 和 环境 限制 ,有 些 原因 和 原因 之 间 , 结 果 和 结果 之 间 的 组 合 不 可 能 出 
现 ,可 在 因果 图 上 用 一 些 记 号 表明 约束 和 限制 条 件 。 

(4) 把 因果 图 转换 成 判定 表 。 

(5) 根据 判定 表 的 每 一 列 ,设计 测试 用 例 。 


5.5 基于 状态 图 的 测试 
5.5.1 功能 图 及 其 符号 


基于 状态 图 的 测试 也 称 为 功能 图 方法 , 它 是 用 功能 图 (Function Diagram,FD) 形 式 化 
的 表示 程序 的 功能 说 明 , 并 机 械 地 生成 功能 图 的 测试 用 例 。 

功能 图 模型 是 由 状态 图 和 逮 辑 功能 模型 构成 的 ,状态 图 用 于 表示 输入 数据 序列 以 及 
相应 的 输出 数据 , 迎 辑 功能 用 于 表示 在 状态 中 输入 条 件 与 输出 条 件 之 间 的 对 应 关系 。 

一 个 程序 的 功能 说 明 通 常 由 动态 说 明和 静态 说 明 组 成 。 动 态 说 明 描述 了 输入 数据 的 
次 序 或 迁移 的 次 序 , 静 态 说 明 描述 了 输入 条 件 和 输出 条 件 之 间 的 对 应 关系 。 在 状态 图 中 ， 
由 输入 数据 和 当前 状态 决定 输出 数据 和 后 续 状 态 。 人 逻辑 功能 模型 适合 于 描述 静态 说 明 ， 
在 迎 辑 功能 模型 中 ,输出 数据 仅 由 输入 数据 决定 。 


5.5.2 功能 图 法 设计 测试 用 例 举例 


从 状态 图 生成 测试 用 例 的 过 程 如 下 : 

(1) 生成 局 部 测试 用 例 。 

(2) 测试 路 径 生 成 。 

(3) 测试 用 例 的 合成 。 

功能 图 由 状态 图 和 布尔 函数 组 成 。 状 态 图 用 如 图 5-3 所 示 的 状态 和 迁移 来 描述 。 

下 面 用 状态 图 表达 自动 柜员 机 (ATM) 的 某 规格 说 明 。 自 动 柜员 机 (ATM) 的 规格 说 
明 如 下 : 

(1) 初始 时 ,ATM 显示 “请 插入 卡片 ”。 
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人) 状态 
XX 初始 状态 
Oa OiO—O 加 二 3 


(a) 状态 (b) 迁移 (c) 决策 表 或 因果 图 
5-3 在 功能 图 中 的 状态 迁移 符号 


(2) 当 插入 卡片 后 ,ATM 显示 “请 输入 密码 ”。 

(3) ATM 检查 输入 的 密码 与 文件 中 保存 的 密码 记录 。 若 相同 , 则 ATM 显示 “请 输 
和 人 金额”; 若 不 同 ,ATM 检查 是 否 三 次 都 打 错 了 ;如 是 , 则 ATM 显示 “停止 处 理 ”, 消 去 这 
个 记录 ,重新 显示 “请 插入 卡片 ”; 若 未 达到 三 次 , 则 ATM 显示 “请 输入 密码 ”。 

(4) 输入 一 个 取款 金额 后 ,ATM 检查 它 是 否 小 于 等 于 余额 , 若 大 于 余额 ,ATM 显示 
“请 输入 金额 ”, 等 待 再 次 输入 金额 ;否则 ATM 付 给 要 求 的 现金 ,报告 金额 ,显示 “请 插入 
a 

由 上 述 规格 说 明 ,得 到 自动 柜员 机 (ATM) 的 状态 图 如 图 5-4 所 示 。 

请 插入 卡片 


F | F 
请 输入 密码 
请 输 密码 (6 司 国 原 
M5 Y 
Y 
Y 
Y 
请 输入 金额 6) 3 
M8 Es 


国 
)M8else M7 ) 
2 


M1- 插 入 卡片 ” M2- 输入 密码 ” M3- 密 码 匹 配 ” M4- 错 输 三 次 
M5- 错 输 少 于 三 次 ” M6- 输 入 金额 M7- 金 额 不 多 于 余额 
M8- 金 额 超出 余额 。 M9- 回 归 初 始 状态 


5-4 一 个 状态 图 的 实例 


5.6 基于 场景 的 测试 
5.6.1 基本 流 和 备 选 流 
基于 场景 的 测试 是 在 面向 对 象 的 测试 中 很 有 用 的 设计 测试 用 例 的 方法 。 该 方法 是 基 


于 IBM 公司 提出 的 Rational 统一 过 程 (RUP) 的 测试 用 例 生成 方法 。 该 方法 从 系统 分 析 
的 结果 一 一 用 例 出 发 ,通过 对 每 个 用 例 的 场景 进行 分 析 , 逐 步 实现 测 试用 例 的 构造 。 
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场景 是 指 事件 触发 时 的 情景 ,同一 事件 不 同 的 触发 顺序 和 处 理 结果 就 形成 了 事件 流 ， 
典型 的 事件 流 分 为 基本 事件 流 ( 简 称 基 本 流 )、 候 补 事件 流 和 蜡 常事 件 流 ( 这 两 者 统称 为 备 
选 流 ) ,如 图 5-5 所 示 。 


用 例 开始 


5-5 用 例 的 事件 流 示例 


按照 图 5-5 中 每 个 经 过 用 例 的 可 能 路 径 , 可 以 确定 如 表 5-7 所 示 的 不 同 用 例 场景 。 
表 5-7 用 例 场景 与 路 径 的 对 应 关系 


场景 描述 路 径 场景 描述 路 经 

场景 1 基本 流 场景 5 | 基本 流 、 备 选 流 3、 备 选 流 1 

场景 2 基本 流 、 备 选 流 1 场景 6 | 基本 流 、 备 选 流 3、 备 选 流 1、 备 选 流 2 
场景 3 基本 流 、 备 选 流 1、 备 选 流 2 场景 7 | 基本 流 、 备 选 流 4 

场景 4 基本 流 、 备 选 流 3 场景 8 | 基本 流 、 备 选 流 3、 备 选 流 4 


5.6.2 场景 法 设计 测试 用 例 举例 


(1) 对 用 例 进行 分 析 。 

(2) 对 用 例 场景 进行 分 析 ,发现 包含 的 基本 流 和 备 选 流 。 
(3) 根据 场景 设计 测试 用 例 。 

(4) 确定 测试 数据 。 


5.7 其 他 黑 盒 测试 用 例 设计 技术 
5.7.1 规范 导出 法 


规范 导出 的 测试 是 根据 相关 的 规格 说 明 书 描述 来 设计 测试 用 例 的 ,每 个 测试 用 例 用 
来 测试 一 个 或 多 个 规格 说 明 的 陈述 语句 。 规 范 导出 法 就 是 根据 陈述 所 用 语句 的 顺序 来 相 
应 地 为 被 测 单元 设计 测试 用 例 。 

规范 导出 法 是 一 种 正 向 的 测试 用 例 设计 技术 ,其 变化 形式 可 以 应 用 到 保密 分 析 、 安 全 
分 析 、 软 件 故障 分 析 或 其 他 对 单元 规格 说 明 做 出 补充 的 文件 上 。 
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5.7.2 内 部 边界 值 测试 法 


通常 可 以 从 单元 的 功能 规格 说 明 中 导出 等 价 类 和 边界 值 测试 ,但 一 个 单元 内 部 可 能 
有 内 部 边界 ,这 时 只 能 从 单元 的 结构 化 规格 说 明 中 找到 。 

内 部 边界 值 测 试 可 以 用 来 发 现 一 些 内 部 错误 ,如 误 把 二 写作 二 二。 但 内 部 边界 值 测 
试 法 应 作为 一 种 补充 方法 ,在 其 他 方法 的 最 后 使 用 。 


5.7.3 错误 猜测 法 


错误 猜测 是 基于 经 验 和 其 他 一 些 测试 技术 的 。 在 经 验 基础 上 测试 设计 者 猜测 错误 的 
类 型 及 发 生 的 位 置 ,并 设计 测试 用 例 去 发 现 它们 。 为 最 大 限度 地 利用 有 效 的 经 验 ,建立 一 
个 错误 类 型 的 列表 是 一 个 好 方法 。 


5.7.4 基于 接口 的 测试 


基于 接口 的 测试 根据 模块 和 它们 之 间 的 相互 关系 特性 选择 测试 数据 ,具体 又 可 分 为 : 
(1) 输入 域 测试 。 
输入 域 测试 的 目标 是 选用 域 的 代表 值 ,从 它们 的 执行 中 得 到 整个 输入 域 的 测试 结果 。 
(2) 特殊 值 测试 。 
特殊 值 测试 是 指 基于 计算 功能 的 特性 来 选择 测试 用 例 的 方法 ,尤其 适用 于 数学 计算 。 
(3) 输出 域 测试 。 
通过 选择 能 够 使 得 每 个 输出 域 会 达到 极端 值 的 输入 数据 作为 测试 用 例 来 执行 测试 ， 
就 是 输出 域 测试 。 


5.7.5 基于 故障 的 测试 


基于 故障 的 测试 (Fault-Based Testing) 目标 是 要 证 明 某 个 规定 的 故障 不 存在 。 基 于 
测试 所 涉及 范围 和 广度 的 不 同 ,基于 故障 的 测试 分 为 : 

一 种 是 涉及 局 部 范围 的 方法 , 它 想 要 证 明 一 个 故障 对 计算 有 局 部 影响 ,很 可 能 这 个 影 
响 不 会 导致 程序 失败 。 

另 一 种 是 涉及 全 局 范围 的 方法 , 它 想 要 证 明 一 个 故障 会 引起 一 个 程序 失败 。 


5.7.6 基于 风险 的 测试 
若 在 测试 过 程 中 ,首先 做 一 个 风险 的 优先 级 列表 ,然后 进行 测试 来 探 询 每 个 风险 ,之 


后 随 着 老 风 险 的 消失 ,新 风险 的 产生 ,调整 测试 工作 重点 到 新 风险 上 ,这样 的 测试 便 是 基 
于 风险 的 测试 。 
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进行 风险 测试 的 基本 步骤 如 下 : 

(1) 决定 要 分 析 什 么 组 件 或 功能 。 

(2) 确定 关心 的 范围 。 

(3) 收集 想 要 分 析 的 对 象 的 信息 。 

(4) 观察 每 个 列表 上 的 每 个 风险 区 域 , 根 据 手 头 上 的 资料 确定 重要 性 。 
(5) 记录 任何 不 清楚 的 .影响 分 析 风 险 能 力 的 事情 。 

(6) 再 次 分 开 检查 所 有 风险 。 


5.7.7 比较 测试 


比较 测试 又 称 back-to-back 测试 ,是 对 同一 软件 的 不 同 版 本 进行 测试 。 就 是 说 ,针对 
同样 的 需求 规格 ,做 出 不 同 的 实现 ,可 利用 其 他 黑 盒 测 试 技术 设计 的 测试 用 例 作 为 另 一 个 
版 本 的 输入 , 若 每 个 版 本 的 输出 相同 就 可 假定 所 有 的 实现 都 正确 , 若 输 出 不 同 就 要 检查 各 
个 版 本 以 发 现 错误 所 在 。 比 较 测试 并 不 能 保证 系统 中 没有 错误 。 如 果 规 格 说 明 本 身 有 
错 , 所 有 的 版 本 都 可 能 反映 该 错误 。 另 外 , 若 各 个 版 本 产生 相同 但 却 错误 的 结果 ,比较 测 


5.8 ”本章 小 结 


本 章 阐述 了 等 价 类 测试 的 实际 应 用 ,等 价 类 测试 的 4 种 类 型 与 具体 原则 ,边界 值 分 析 
的 概念 和 选择 测试 用 例 的 7 个 原则 ,边界 值 测试 用 例 的 设计 ,判定 表 的 概念 和 基于 判定 表 
的 设计 测试 用 例 方法 ,因果 图 的 概念 .适用 范围 及 基于 因果 图 的 设计 测试 用 例 方法 ,状态 
图 的 概念 ,符号 及 基于 状态 图 的 设计 测试 用 例 方 法 ,基本 流 和 备 选 流 的 概念 及 基于 场景 的 
设计 测试 用 例 方法 以 及 其 他 黑 盒 测试 用 例 设计 技术 ,如 规范 导出 法 、 内 部 边界 值 测试 法 、 
比较 测试 等 。 


第 6 章 单元 测试 和 集成 测试 
6.1 单元 测试 的 基本 概念 


6.1.1 单元 测试 的 定义 和 目标 


单元 测试 是 在 软件 开发 过 程 中 要 进行 的 最 低级 别 的 测试 活动 ,或 者 说 是 针对 软件 设 
计 的 最 小 单位 一 一 程序 模块 ,进行 正确 性 检验 的 测试 工作 ,其 目标 是 : 

(1) 验证 代码 是 与 设计 相符 合 的 ; 

(2) 跟踪 需求 与 设计 的 实现 ; 

(3) 发 现 设 计 和 需求 中 存在 的 缺陷 ; 

(4) 发 现在 编码 过 程 中 引入 的 错误 。 

单元 测试 的 活动 模型 如 图 6-1 所 示 。 


| 模块 设计 | | 准备 | | 代码 | | 代码 | | 单元 跟踪 | _。| 模块 设计 | 
| 规格 说 明 书 | 编写 审查 测试 调试 | ”| 规格 说 明 书 | 
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6-1 单元 测试 活动 模型 


6.1.2 单元 测试 与 集成 测试 ,系统 测试 的 区 别 


1. 单元 测试 与 集成 测试 的 区 别 


加 测试 对 象 不 同 。 单 元 测试 对 象 是 实现 了 有 具体 功能 的 程序 单元 ;而 集成 测试 对 象 是 
概要 设计 规划 中 的 模块 及 模块 间 的 组 合 。 

@ 测试 方法 不 同 。 单 元 测试 中 的 主要 测试 方法 是 基于 代码 的 白 盒 测试 ;而 集成 测试 
中 主要 是 使 用 基于 功能 的 黑 盒 测 试 。 

@ 测试 时 间 不 同 。 集 成 测试 要 晚 于 单元 测试 。 

@ 测试 内 容 不 同 。 单 元 测试 主要 是 模块 内 程序 的 多 辑 、 功 能 、 参 数 传递 .变量 引用 、 
出 错 处 理 及 需求 和 设计 中 具体 要 求 方面 的 测试 ;而 集成 测试 主要 验证 各 个 接口 .接口 之 间 
的 数据 传递 关系 ,及 模块 组 合 后 能 否 达到 预期 效果 。 


2. 单元 测试 与 系统 测试 的 区 别 


Q@ 单元 测试 属于 白 盒 测试 ,是 从 开发 者 的 角度 考虑 问题 ,关注 的 是 单元 的 具体 实现 、 
内 部 逻辑 结构 和 数据 流向 ;系统 测试 属于 黑 盒 测试 ,是 从 用 户 角 度 出 发 看 问题 ,主要 目的 
是 证 明 系统 已 满足 用 户 的 需要 。 


单元 测试 和 集成 测试 


@ 单元 测试 使 问题 及 早 暴露 ,便于 定位 解决 ,属于 早期 测试 ;系统 测试 是 一 种 后 期 测 
@ 单元 测试 允许 多 个 被 测 单元 同时 进行 测试 ;系统 测试 是 基于 需求 规格 说 明 的 。 


6.1.3 单元 测试 环境 


单元 测试 的 环境 并 不 是 系统 投入 使 用 后 所 需 的 真实 环境 ,而 应 建立 一 个 满足 单元 测 
试 要 求 的 环境 来 做 好 单元 测试 工作 ,环境 中 要 用 到 一 些 辅 助 模块 来 模拟 与 被 测 模块 相 联 
系 的 其 他 模块 ( 见 图 6-2) ,通常 分 为 两 种 : 

@ 驱动 模块 (Driver) ,相当 于 被 测 模块 的 主 模块 。 

@ 桩 模块 (Stub) ,用 于 代替 被 测 模块 调用 的 子 模块 。 


测试 用 例 驱动 程序 实测 结果 


驱动 程序 驱动 程序 驱动 程序 
图 6-2 单元 测试 环境 


6.2 单元 测试 策略 
6.2.1 自 项 向 下 的 单元 测试 策略 


自 项 向 下 的 单元 测试 策略 为 : 

中 从 最 项 层 开始 ,把 项 层 调用 的 单元 用 桩 模块 代 蔡 ,对 顶层 模块 做 单元 测试 。 

加 对 第 二 层 测 试 时 ,使 用 上 面 已 测试 的 单元 做 驱动 模块 ,并 为 被 测 模块 编写 新 的 桩 
模块 。 

@ 以 此 类 推 ,直到 全 部 单元 测试 结束 。 

这 种 策略 的 优点 是 : 可 以 在 集成 测试 之 前 为 系统 提供 早期 的 集成 途径 。 缺 点 是 : 随 
着 单元 测试 的 进行 ,测试 过 程 会 变 得 越 来 越 复杂 。 因 为 更 改 任何 一 个 单元 时 ,就 必须 重新 
测试 该 单元 下 层 调用 的 所 有 单元 。 


6.2.2 自 底 向 上 的 单元 测试 策略 


自 底 向 上 的 单元 测试 的 策略 为 : 

中 先 对 模块 调用 图 上 最 底层 的 模块 进行 测试 ,使 用 驱动 模块 来 代替 调用 它 的 上 层 
模块 。 

@ 对 上 一 层 模块 进行 单元 测试 时 ,用 已 经 测试 过 的 模块 做 桩 模块 ,并 为 被 测 模块 编 


43 


《软件 测试 理论 与 技术 》 


写 新 的 驱动 模块 。 

@ 以 此 类 推 ,直到 全 部 单元 测试 结束 。 

这 种 策略 的 优点 是 : 无 须 单 独 设计 桩 模块 ;无须 依 赖 结构 设计 ;可 为 系统 提供 早期 的 
集成 途径 。 缺 点 是 : 随 着 单元 测试 的 不 断 进 行 , 测 试 过 程 会 变 得 越 来 越 复 杂 ,测试 周期 延 
长 ,测试 和 维护 的 成 本 增加 。 


6.2.3 孤立 测试 


这 种 测试 策略 是 不 考虑 每 个 模块 与 其 他 模块 之 间 的 关系 ,分 别 为 每 个 模块 单独 设计 
桩 模块 和 驱动 模块 ,逐一 完成 所 有 单元 模块 的 测试 。 


6.2.4 综合 测试 


在 单元 测试 中 ,编写 桩 模块 的 工作 量 相当 大 , 故 为 有 效 减 少 开发 桩 模块 的 工作 量 , 可 
以 考虑 自 底 向 上 测试 策略 与 孤立 测试 策略 相 结合 的 综合 测试 策略 。 


6.3 单元 测试 分 析 

单元 测试 分 析 的 目的 是 根据 可 能 的 各 种 情况 ,确定 测试 内 容 , 确 认 这 段 代 码 是 否 在 任 
何 情况 下 都 和 期 望 的 一 致 。 测 试 人 员 要 依据 详细 设计 规格 说 明和 源 程序 清单 ,理解 模块 
的 IVO 条 件 和 模块 的 迎 辑 结构 。 在 进行 单元 测试 分 析 时 , 主要 从 以 下 几 个 方面 进行 
考虑 。 


6.3.1 模块 接口 


在 进行 软件 测试 时 ,必须 输入 、 输 出 正确 的 内 容 , 这 样 才能 使 测试 有 意义 。 只 有 数据 
在 模块 接口 处 正确 ,才能 进一步 开展 工作 。 


6.3.2 局 部 数据 结构 

往往 错误 的 根源 在 于 局 部 数据 结构 出 错 。 之 所 以 要 对 局 部 数据 结构 进行 检查 ,主要 
是 为 了 保证 临时 存储 在 模块 内 的 数据 在 程序 执行 过 程 中 正确 、 完 整 ,所 以 应 当 认 真 地 设计 
测试 用 例 。 
6.3.3 独立 路 径 


单元 测试 的 一 个 基本 任务 是 保证 模块 中 每 条 语句 至 少 执行 一 次 。 使 用 基本 路 径 测试 
和 循环 测试 有 助 于 发 现 程序 中 因 计 算 错 误 、 比 较 不 正确 、 控 制 流 不 适当 而 造成 的 错误 。 
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6.3.4 出 错 处 理 


一 个 好 的 设计 应 当 能 够 预见 各 种 出 错 条 件 , 具 备 适当 的 出 错 处 理 机 制 , 即 预 设 各 种 出 
错 处 理 通路 。 出 错 处 理 能 力 是 软件 功能 的 重要 组 成 部 分 , 它 保 证 了 软件 在 运行 出 错时 能 
够 得 到 及 时 的 补救 ,保证 其 逮 辑 上 的 正确 性 。 出 错 处 理 机 制 是 如 此 重要 ,应当 对 其 进行 认 
真 的 测试 。 


6.3.5 边界 条 件 


这 是 最 后 也 是 最 重要 的 一 项 任务 。 软 件 时 常会 在 边界 上 失效 ,边界 测试 运用 边界 值 
分 析 技 术 对 边界 值 及 其 左右 设计 测试 用 例 , 这 可 以 帮助 发 现 错误 。 


6.3.6 其 他 测试 分 析 的 指导 原则 


(1) 验证 测试 结果 的 正确 性 。 
(2) 使 用 反 向 关联 检查 。 
(3) 交叉 检查 结果 。 

(4) 强制 一 些 错误 发 生 。 


6.4 单元 测试 的 测试 用 例 设计 原则 
6.4.1 单元 测试 的 测试 用 例 设计 步骤 


测试 用 例 设 计 通 常 依据 的 是 软件 设计 文档 。 对 单元 测试 而 言 ,不 仅仅 要 进行 正 向 测 
试 ,还 要 求 进行 反 向 测试 。 以 下 6 个 通用 步骤 用 来 指导 完成 测试 用 例 的 设计 : 

(1) 为 系统 运行 设计 用 例 。 

(2) 为 正 向 测试 设计 用 例 。 

(3) 为 逆向 测试 设计 用 例 。 

(4) 为 满足 特殊 需求 设计 用 例 。 

(5) 为 代码 覆盖 设计 用 例 。 

(6) 为 覆盖 率 指标 完成 设计 用 例 。 


6.4.2 单元 测试 中 的 白 盒 测试 与 黑 盒 测 试 
单元 测试 用 例 的 设计 方法 通常 白 盒 和 黑 盒 都 是 可 以 的 ,但 是 以 白 盒 测试 为 主 。 


白 盒 测 试 应 该 达到 的 覆盖 率 目 标 是 : 语句 覆盖 率 达 到 100%% ,分 支 覆盖 率 达 到 
100% ,覆盖 程序 中 的 主要 路 径 , 即 覆盖 完成 需求 和 设计 功能 的 代码 所 在 的 路 径 和 程序 异 
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常 处 理 执行 到 的 路 径 。 

使 用 黑 盒 测试 方法 设计 测试 用 例 通 常 使 用 功能 覆盖 率 来 量度 测试 的 完整 性 ,而 功能 
覆盖 率 中 最 常见 的 就 是 需求 覆盖 ,目的 是 设计 一 定 的 测试 用 例 , 使 得 每 个 需求 点 都 被 测试 
到 。 其 次 还 包括 接口 覆盖 ,目的 是 通过 设计 测试 用 例 , 使 系统 的 每 个 接口 都 被 测试 到 。 黑 
盒 测 试 应 达到 的 覆盖 率 目 标 是 : 程序 单元 正确 实现 了 需求 和 设计 要 求 的 所 有 功能 ;程序 
单元 满足 性 能 要 求 ;程序 单元 有 好 的 可 靠 性 和 安全 性 。 


6.5 集成 测试 的 基本 概念 
6.5.1 集成 测试 的 定义 


所 谓 集成 测试 是 指 根 据 实际 情况 对 程序 模块 采用 适当 的 集成 测试 策略 组 装 起 来 ,对 
系统 的 接口 以 及 集成 后 的 功能 进行 正确 性 检验 。 
集成 测试 又 称 为 组 装 测试 .联合 测试 . 子 系统 测试 或 部 件 测试 。 


6.5.2 集成 测试 与 系统 测试 的 区 别 


(1) 测试 对 象 不 同 。 集 成 测试 对 象 是 由 通过 了 单元 测试 的 各 个 模块 所 集成 起 来 的 构 
件 ; 系 统 测试 对 象 则 除了 软件 之 外 ,还 包括 计算 机 硬件 及 相关 的 外 设 、 数 据 采集 和 传输 机 
构 ,支持 软件 、 系 统 操作 人 员 等 整个 系统 。 

(2) 测试 时 间 不 同 。 集 成 测试 先 于 系统 测试 。 

(3) 测试 方法 不 同 。 集 成 测试 通常 采用 白 盒 和 黑 盒 相 结合 的 测试 方法 ,也 称 为 灰 盒 
测试 ;系统 测试 通常 使 用 黑 盒 测试 。 

(4) 测试 内 容 不 同 。 集 成 测试 主要 是 测试 各 个 单元 模块 之 间 的 接口 及 各 模块 集成 后 
的 功能 ;系统 测试 主要 是 测试 整个 系统 的 功能 和 性 能 。 

(5) 测试 目的 不 同 。 集 成 测试 的 主要 目的 是 发 现 单元 间接 口 的 错误 ,以 及 发 现 集成 
的 软件 同 概要 设计 规格 说 明 不 一 致 的 地 方 ;系统 测试 的 主要 目的 是 找 出 软件 与 系统 定义 
不 符合 或 矛盾 的 地 方 。 

(6) 测试 角度 不 同 。 集 成 测试 是 站 在 测试 人 员 的 角度 上 进行 的 ;系统 测试 则 站 在 用 
户 的 角度 来 进行 。 


6.5.3 集成 测试 与 开发 的 关系 


为 了 使 读者 更 好 地 了 解 集成 测试 与 开发 的 关系 ,图 6-3 给 出 了 软件 基本 结构 图 。 

软件 产品 的 层次 .构件 分 布 . 子 系统 分 布 为 集成 测试 策略 的 选取 提供 了 重要 的 参考 依 
据 , 从 而 可 以 减少 集成 测试 过 程 中 桩 模块 和 驱动 模块 开发 的 工作 量 ,促使 集成 测试 快速 、 
高 质量 地 完成 。 而 集成 测试 可 以 服务 于 架构 设计 ,可 以 检验 所 设计 的 软件 架构 中 是 否 有 
错误 和 遗漏 ,以 及 是 否 存在 二 义 性 。 集 成 测试 和 架构 设计 二 者 也 是 相辅相成 的 关系 。 
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A 产品 
子 系统 1 子 系统 2 
硬件 子 系统 1 软件 子 系统 1 硬件 子 条 统 2] | 软件 子 系统 2 | 
1 1 
1 | 
人 人 二 二 一 1 1 
| 软件 模块 1 | 软件 模块 2 | | 软件 模块 3| ”| 软件 模块 4 | 
! | (软件 结构 图 ) | 
| 软件 程序 1 软件 程序 2 | 
上 
上 1 
| 1 
1 [单元 1 单元 2 单元 3 单元 | | 
| (软件 模块 结构 ) | 


图 6-3 软件 基本 结构 图 


6.5.4 集成 测试 重点 


(1) 各 个 模块 连接 起 来 后 , 穿 过 模块 接口 的 数据 是 否 会 丢失 ,是 否 能 够 按期 望 值 传递 
给 另外 一 个 模块 ; 

(2) 各 模块 连 起 来 后 ,需要 判断 是 否 仍然 存在 单元 测试 时 所 没 发 现 的 资源 竞争 问题 ; 

(3) 分 别 通 过 单元 测试 的 子 功能 模块 集成 到 一 起 能 否 实现 所 期 望 的 父 功能 ; 

(4) 兼容 性 ,检查 引入 一 个 模块 后 ,是 否 对 其 他 与 之 相关 的 模块 产生 负面 影响 ; 

(5) 全 局 数据 结构 是 否 正确 ,是 否 被 不 正常 地 修改 ; 

(6) 集成 后 ,每 个 模块 的 误差 是 否 会 累计 扩大 ,是 否 达 到 了 不 可 接受 的 程度 。 


6.5.5 集成 测试 层次 


对 于 传统 软件 ,集成 测试 可 划分 为 三 个 层次 : 模块 内 集成 测试 、 子 系统 内 集成 测试 、 
子 系统 间 集 成 测试 。 

对 于 面向 对 象 的 应 用 系统 ,集成 测试 可 分 为 两 个 层次 : 类 内 集成 测试 .类 间 集 成 
测试 。 
6.5.6 集成 测试 环境 

搭建 集成 测试 环境 时 ,通常 从 以 下 几 个 方面 考虑 : 

(1) 硬件 环境 ; 


(2) 操作 系统 环境 ; 
(3) 数据 库 环境 ; 
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(4) 网 络 环境 ; 
(5) 测试 工具 运行 环境 ; 
(6) 其 他 环境 。 


6.6 集成 测试 的 策略 
6.6.1 基于 分 解 的 集成 策略 


(1) 一 次 性 集成 方式 。 

这 种 方式 也 称 为 大 突击 (Big Bang) 测 试 ,是 一 种 非 增 量 式 测试 。 这 种 方式 是 把 所 有 
系统 构件 一 次 性 集成 到 一 起 进行 测试 ,不 考虑 构件 之 间 的 相互 依赖 性 或 可 能 存在 的 风险 ， 
其 主要 目标 是 在 最 短 的 时 间 内 把 系统 组 装 起 来 ,使 用 最 少 的 测试 来 验证 整个 系统 。 

(2) 自 项 向 下 的 增 量 式 集成 方式 。 

这 种 集成 方式 是 从 顶层 控制 开始 ,采用 与 设计 一 样 的 顺序 ,将 模块 按 系 统 结构 的 层 
次 , 沿 控制 层次 自 顶 向 下 逐步 集成 测试 ,以 验证 系统 的 接口 稳定 性 。 

(3) 自 底 向 上 的 增 量 式 集成 方式 。 

这 种 集成 方式 是 从 程序 模块 结构 的 最 底层 模块 开始 集成 和 测试 的 ,目标 是 检测 整个 
系统 的 稳定 性 。 

(4) 混合 的 增 量 式 (三 明治 ) 集 成 方式 。 

综合 了 上 面 两 种 集成 方式 的 优点 ,将 系统 划分 为 三 层 , 中 间 一 层 为 目标 层 ,测试 时 ,对 
目标 层 上 面 使 用 自 项 向 下 集成 策略 ,对 目标 层 下 面 使 用 自 底 向 上 集成 策略 ,最 后 的 测试 在 
目标 层 会 合 。 

(5) 改进 的 三 明治 集成 。 

弥补 了 三 明治 集成 不 能 充分 测试 中 间 层 的 缺点 , 尽 可 能 提高 测试 的 并 行 性 。 具 体 策 
略 是 并 行 目标 层 、 目 标 层 上 面 一 层 、 目 标 层 下 面 一 层 ;并 行 测试 目标 层 与 其 上 面 一 层 的 集 
成 和 目标 层 与 其 下 面 一 层 的 集成 。 


6.6.2 基于 功能 的 集成 


基于 功能 的 集成 是 从 功能 的 角度 出 发 ,按照 功能 的 关键 程度 对 模块 的 集成 顺序 进行 
组 织 , 目 的 是 采用 增 量 式 集成 的 方法 ,尽早 验证 系统 的 关键 功能 。 


6.6.3 基于 调用 图 的 集成 


单元 调用 图 是 一 种 有 向 图 ,节点 表示 程序 单元 , 边 表示 程序 调用 。 基 于 调用 图 的 集成 
方式 有 两 种 , 即 成 对 集成 和 相 邻 集成 。 
涉及 的 重要 等 式 有 : 
内 部 结 点 个 数 = 结 点 总 数 一 ( 源 结 点 个 数 十 汇 结 点 个 数 ) 
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邻居 个 数 = 内 部 结 点 个 数 十 源 结 点 个 数 = 结 点 总 数 一 汇 结 点 个 数 
6.6.4 基于 路 径 的 集成 


基于 路 径 的 集成 测试 中 ,把 功能 测试 和 结构 测试 的 方法 结合 到 一 起 ,但 基于 路 径 集成 
的 测试 需要 投入 标志 MM- 路 径 的 时 间 。 


6.6.5 基于 进度 的 集成 

基于 进度 的 集成 (Schedule-Based Integration) 是 在 兼顾 进度 和 质量 两 者 之 间 寻 找 一 
个 均衡 点 ,该 集成 的 基本 策略 就 是 把 最 早 可 获得 的 代码 拿 来 立即 进行 集成 ,必要 时 开发 桩 
模块 和 驱动 模块 ,在 最 大 限度 上 保持 与 开发 的 并 行 性 ,从 而 缩短 项 目的 集成 时 间 。 
6.6.6 基于 风险 的 集成 

基于 风险 的 集成 (Risk-Based Integration) 基 于 一 个 假设 , 即 系统 风险 最 高 的 模块 间 
的 集成 往往 也 是 错误 最 集中 的 地 方 ,因此 尽早 验证 这 些 接口 有 助 于 系统 的 快速 、 稳 定 
开发 。 
6.7 集成 测试 分 析 
6.7.1 体系 结构 分 析 

首先 ,跟踪 需求 分 析 , 对 要 实现 的 系统 划分 出 结构 层次 图 。 

其 次 ,是 对 系统 各 个 组 件 之 间 的 依赖 关系 进行 分 析 , 然 后 据 此 确定 集成 测试 的 粒度 ， 
即 集 成 模块 的 大 小 。 
6.7.2 模块 分 析 

一 般 ,可 从 以 下 几 个 角度 进行 模块 分 析 : 

(1) 确定 本 次 要 测试 的 模块 ; 

(2) 找 出 与 该 模块 相关 的 所 有 模块 ,并 且 按 优先 级 对 这 些 模 块 进行 排列 ; 

(3) 从 优先 级 别 最 高 的 相关 模块 开始 ,把 被 测 模块 与 其 集成 到 一 起 ; 

(4) 然后 依次 集成 其 他 模块 。 
6.7.3 接口 分 析 


接口 的 划分 要 以 概要 设计 为 基础 ,一 般 通过 以 下 几 个 步骤 来 完成 : 


《软件 测试 理论 与 技术 》 


(1) 确定 系统 的 边界 、 子 系统 的 边界 和 模块 的 边界 。 
(2) 确定 模块 内 部 的 接口 。 

(3) 确定 子 系统 内 模块 间 的 接口 。 

(4) 确定 子 系统 间 的 接口 。 

(5) 确定 系统 与 操作 系统 的 接口 。 

(6) 确定 系统 与 硬件 的 接口 。 

(7) 确定 系统 与 第 三 方 软件 的 接口 。 


6.7.4 可 测试 性 分 析 


系统 的 可 测试 性 分 析 应 当 在 项 目 开 始 时 作为 一 项 需求 提出 来 ,并 设计 到 系统 中 去 。 
在 集成 测试 阶段 ,分 析 可 测试 性 主要 是 为 了 平衡 随 着 集成 范围 的 增加 而 导致 的 可 测试 性 
下 降 。 尽 可 能 早 地 分 析 接 口 的 可 测试 性 ,提前 为 测试 的 实现 做 好 准备 。 


6.7.5 集成 测试 策略 的 分 析 


集成 测试 策略 分 析 主 要 根据 被 测 对 象 选择 合适 的 集成 策略 。 一 般 来 说 ,一 个 好 的 集 
成 测试 策略 有 以 下 特点 : 

(1) 能 对 被 测 对 象 进行 比较 充分 的 测试 。 

(2) 能 使 模块 与 接口 的 划分 清晰 明了 。 

(3) 要 使 投入 的 集成 测试 资源 大 致 合理 。 


6.7.6 常见 的 集成 测试 故障 


大 部 分 集成 测试 的 故障 与 接口 有 关 ,一 般 的 接口 错误 包括 : 
(1) 配置 /版 本 控制 错误 。 

(2) 遗漏 、 重 释 或 冲突 的 函数 。 

(3) 文件 或 数据 库 使 用 不 正确 或 不 一 致 的 数据 结构 。 

(4) 文件 或 数据 库 使 用 冲突 的 数据 视图 /用 法 。 

(5) 破坏 全 局 存储 或 数据 库 数据 的 完整 性 。 

(6) 由 于 编码 错误 或 未 预料 到 的 运行 时 绑 定 导致 的 错误 方法 调用 。 
(7) 客户 发 送 违反 服务 器 前 提 条 件 的 消息 。 

(8) 错误 的 对 象 和 消息 的 绑 定 。 

(9) 参数 错误 或 不 正确 的 参数 值 。 

(10) 由 不 正确 的 内 存 管理 分 配 /回收 引起 的 失效 。 

(11) 构件 之 间 的 冲突 。 

(12) 资源 竞争 ,目标 环境 不 能 分 配 象征 性 装载 所 需 的 资源 。 


50 


单元 测试 和 集成 测试 


6.8 ”集成 测试 的 测试 用 例 设计 


集成 测试 一 般 采 用 的 是 介 于 白 盒 测试 和 黑 盒 测试 之 间 的 灰 盒 测试 , 它 综合 使 用 了 和 白 
盒 测试 和 黑 盒 测试 中 的 测试 分 析 方法 。 一 般 而 言 , 在 经 过 集成 测试 分 析 之 后 ,测试 用 例 的 
大 致 轮廓 已 经 确定 。 集 成 测试 用 例 设 计 的 基本 要 求 是 : 充分 保证 测试 用 例 的 正确 性 , 保 
证 测试 用 例 无 误 地 完成 测试 项 既定 的 测试 目标 ,满足 相应 的 测试 覆盖 率 要 求 。 

(1) 为 系统 运行 设计 测试 用 例 。 

设计 一 些 起 码 能 够 保证 系统 运行 的 测试 用 例 , 这 些 用 例 用 来 测试 验证 最 基本 的 功能 。 

可 使 用 的 测试 分 析 技 术 有 : 等 价 类 测试 .边界 值 测 试 、 基 于 决策 表 的 测试 。 

(2) 为 正 向 测试 设计 测试 用 例 。 

正 向 测试 重点 是 验证 集成 后 的 模块 是 否 按 照 设计 实现 了 预期 的 功能 。 

可 使 用 的 测试 分 析 技 术 有 : 输入 域 测试 .输出 域 测试 、 等 价 类 测试 、 状 态 迁 移 测试 、 规 
范 导 出 法 。 

(3) 为 逆向 测试 设计 测试 用 例 。 

逆向 测试 主要 包括 分 析 被 测 接口 是 否 完成 需求 规格 未 描述 的 功能 ;检查 规格 说 明 可 
能 出 现 的 遗漏 ;判断 接口 定义 是 否 有 误 ;判断 可 能 出 现 的 接口 异常 错误 ,包括 接口 数据 本 
身 的 错误 .接口 数据 顺序 错误 等 。 

可 使 用 的 分 析 技术 有 : 错误 猜测 法 ,基于 风险 的 测试 、 基 于 故障 的 测试 ,边界 值 测试 、 
特殊 值 测试 ,状态 迁移 测试 。 

(4) 为 满足 特殊 需求 设计 测试 用 例 , 可 使 用 规范 导出 法 。 

(5) 为 高 覆盖 率 设计 测试 用 例 。 

单元 测试 的 覆盖 重点 主要 是 路 径 覆 盖 、 条 件 覆 盖 等 ,而 集成 测试 阶段 所 关注 的 覆盖 主 
要 为 功能 覆盖 和 接口 覆盖 ,可 使 用 功能 和 接口 的 覆盖 分 析 。 

(6) 测试 用 例 补 充 。 

根据 项 目的 变化 ,按照 需求 增加 和 补充 集成 测试 的 用 例 , 保 证 进行 充分 的 集成 测试 。 


6.9 本 章 小 结 


本 章 曾 述 了 单元 测试 的 基本 概念 及 单元 测试 与 集成 测试 、 系 统 测试 的 区 别 ,4 种 单元 
测试 策略 和 它们 的 优 缺 点 ,单元 测试 分 析 要 考虑 的 5 个 方面 ,单元 测试 的 测试 用 例 设计 原 
则 ,集成 测试 的 基本 概念 和 集成 测试 与 系统 测试 的 区 别 ,集成 测试 的 7 种 策略 和 它们 的 优 
缺点 ,集成 测试 分 析 要 考虑 的 5 个 方面 以 及 掌握 集成 测试 的 测试 用 例 设 计 原则 。 


7.1 系统 测试 概念 
7.1.1 什么 是 系统 测试 


系统 测试 是 将 已 经 集成 好 的 软件 系统 ,作为 计算 机 系统 的 一 个 元 素 , 与 计算 机 硬件 、 
某 些 支持 软件 .数据 和 人 员 等 其 他 系统 元 素 结合 在 一 起 ,在 实际 运行 环境 下 ,对 计算 机 系 
统 进行 一 系列 的 集成 测试 和 确认 测试 。 

系统 测试 目标 是 : 通过 与 系统 的 需求 规格 说 明 进 行 比较 ,检查 软件 是 否 存在 与 系统 
规格 不 符合 或 与 之 矛盾 的 地 方 , 从 而 验证 软件 系统 的 功能 和 性 能 等 满足 规格 说 明 所 指定 
的 要 求 。 


7.1.2 系统 测试 与 单元 测试 .集成 测试 的 区 别 


单元 测试 是 在 软件 开发 过 程 中 要 进行 的 最 低级 别 的 测试 活动 ,或 者 说 是 针对 软件 设 
计 的 最 小 单位 一 一 程序 模块 ,进行 正确 性 检验 的 测试 工作 。 集 成 测试 是 指 根据 实际 情况 
对 程序 模块 采用 适当 的 集成 测试 策略 组 装 起 来 ,对 系统 的 接口 以 及 集成 后 的 功能 进行 正 
确 性 检验 。 

三 者 的 区 别 在 第 6 章 分 别 进 行 比较 过 ,这 里 以 系统 测试 为 主体 再 综合 比较 一 下 : 

(1) 测试 方法 不 同 。 系 统 测试 主要 是 黑 盒 测试 ,而 单元 测试 .集成 测试 主要 属于 白 盒 
测试 或 灰 盒 测试 的 范畴 。 

(2) 考察 范围 不 同 。 单 元 测试 主要 测试 模块 内 部 接口 .数据 结构 、 人 逻辑 、 异 常 处 理 等 
对 象 ; 集 成 测试 主要 测试 模块 之 间 的 接口 和 异常 ;系统 测试 主要 测试 整个 系统 相对 于 用 户 
的 需求 。 

(3) 评估 基准 不 同 。 系 统 测试 的 评估 基准 是 测试 用 例 对 需求 规格 说 明 的 覆盖 率 ,而 
单元 测试 和 集成 测试 的 评估 主要 是 代码 的 覆盖 率 。 


7.1.3 集成 测试 的 组 织 和 分 工 


系统 测试 组 组 长 : 组 织 系统 测试 ,负责 与 管理 IT 设备 的 人 员 联 系 , 搭 建 好 系统 测试 
的 硬件 ,软件 平台 。 

测试 分 析 员 : 负责 设计 和 实现 测试 脚本 和 测试 用 例 。 

测试 员 : 负责 执行 测试 脚本 中 记录 的 测试 用 例 。 


7.1.4 系统 测试 分 析 

在 系统 测试 的 各 个 环节 中 ,比较 关键 的 还 是 系统 测试 用 例 的 设计 阶段 ,在 做 系统 测试 
分 析 时 ,通常 从 以 下 几 个 层次 进行 分 析 : 

1. 用 户 层 


因为 用 户 层面 向 的 最 终 使 用 者 是 用 户 , 因 此 用 户 层 的 测试 主要 围绕 着 用 户 界 面 的 规 
范 性 友好 性 、 可 操作 性 .系统 对 用 户 的 支持 ,以 及 数据 的 安全 性 等 方面 展开 。 另 外 ,用 户 
层 的 测试 通常 还 应 注意 可 维护 性 测试 和 安全 性 测试 。 


2. 应 用 层 


应 用 层 的 测试 主要 是 针对 产品 工程 应 用 或 行业 应 用 的 测试 。 从 应 用 软件 系统 的 角度 
出 发 ,模拟 实际 应 用 环境 ,对 系统 的 兼容 性 、 可 靠 性 、 性 能 等 进行 测试 。 针 对 整个 系统 的 应 
用 层 测 试 , 包 含 并 发 性 能 测试 .负载 测试 .压力 测试 .强度 测试 .破坏 性 测试 。 


3. 功能 层 


功能 层 的 测试 是 要 检测 系统 是 否 已 经 实现 需求 规格 说 明 中 定义 的 功能 ,以 及 系统 功 
能 之 间 是 否 存 在 类 似 共享 资源 访问 冲突 的 情况 。 


4. 子 系统 层 

子 系统 层 的 测试 是 针对 产品 内 部 结构 性 能 的 测试 。 

5. 协议 /指标 层 

协议 /指标 层 的 测试 是 针对 系统 所 支持 的 协议 ,进行 协议 一 致 性 测试 和 协议 互通 测试 。 
7.1.5 系统 测试 环境 

软件 测试 环境 的 搭建 是 软件 测试 实施 的 一 个 重要 阶段 和 环节 。 在 软件 开发 过 程 中 ， 
创建 可 复 用 的 软件 构件 库 , 对 于 提高 开发 质量 、 减 少 开 发 费用 保证 开发 进度 有 极 重要 的 
辅助 作用 。 同 样 地 ,测试 人 员 也 可 以 构建 软件 测试 环境 库 的 方式 来 实现 软件 测试 环境 的 
复 用 ,节省 测试 时 间 。 
7.2 系统 测试 的 方法 
7.2.1 功能 测试 


功能 测试 (Functional Testing) 属 于 黑 盒 测 试 , 是 系统 测试 中 最 基本 的 测试 。 功 能 测 
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试 主要 根据 产品 的 需求 规格 说 明和 测试 需求 列表 ,验证 产品 是 否 符合 需求 规格 说 明 。 
需求 规格 说 明 是 功能 测试 的 基本 输入 ,所 以 在 做 功能 测试 前 ,首先 要 做 的 就 是 对 需求 
规格 说 明 进行 分 析 , 明 确 功 能 测试 的 重点 。 
功能 测试 用 例 是 功能 测试 工作 的 核心 ,常见 的 测试 用 例 设计 方法 有 : 规范 导出 法 ;等 
价 类 测试 ;边界 值 测试 ;因果 图 法 ;基于 判定 表 的 测试 ; 正 交 实验 设计 法 ;基于 风险 的 测试 。 


7.2.2 协议 一 致 性 测试 


协议 一 致 性 测试 (Protocol Conformance Testing) 主 要 用 于 分 布 式 系 统 , 因 为 在 分 布 
式 系统 中 ,很 多 功能 的 实现 是 通过 多 台 计 算 机 相互 协作 来 完成 的 ,这 要 求 计算 机 之 间 能 相 
互 交换 信息 ,所 以 需要 制定 一 些 规则 (协议 ) ,而 协议 实现 者 往往 会 因为 理解 错误 而 错误 地 
实现 了 协议 , 故 要 对 这 些 协议 进行 测试 。 通常 包括 以 下 几 种 类 型 的 协议 测试 : 

(1) 协议 一 致 性 测试 ; 

(2) 协议 性 能 测试 ; 

(3) 协议 互 操 作 性 测试 ; 

(4) 协议 健壮 性 测试 。 

协议 测试 常用 的 测试 用 例 设 计 方 法 有 : 规范 导出 法 ;等 价 类 测试 ;边界 值 测试 。 


7.2.3 性 能 测试 


性 能 测试 (Performance Testing) 主要 用 于 实时 系统 和 嵌入 式 系统 ,性 能 测试 是 指 测 
试 软件 在 集成 系统 中 的 运行 性 能 ,目标 是 量度 系统 的 性 能 和 预先 定义 的 目标 有 多 大 差距 。 

一 个 有 用 的 性 能 测试 是 压力 测试 。 典 型 的 压力 测试 实例 是 当 系 统 同 时 接收 极 大 数量 
的 用 户 和 用 户 请 求 时 ,需要 测量 系统 的 应 对 能 力 。 

性 能 测试 要 有 工具 支持 ,在 某 种 情况 下 ,测试 人 员 必须 自己 开发 专门 的 接口 工具 。 

性 能 测试 常用 的 测试 用 例 设 计 方 法 有 : 规范 导出 法 ;错误 猜测 法 。 


7.2.4 压力 测试 


压力 测试 (Stress Testing) 又 称 强度 测试 ,是 在 各 种 资源 超 负 荷 的 情况 下 观察 系统 的 
运行 情况 的 测试 。 压 力 测 试 常用 的 测试 用 例 设计 方法 有 : 规范 导出 法 ;边界 值 测试 ;错误 
猜测 法 。 


7.2.5 容量 测试 


容量 测试 (Volume Testing) 是 在 系统 正常 运行 的 范围 内 测试 并 确定 系统 能 够 处 理 的 
据 容量 。 容 量 测试 是 面向 数据 的 ,主要 目的 就 是 检测 系统 可 以 处 理 目标 内 确定 的 数据 
量 。 


数 
容量 。 容 量 测试 常用 的 测试 用 例 设计 方法 有 : 规范 导出 法 ;边界 值 测 试 ;错误 猜测 法 。 
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7.2.6 安全 性 测试 


安全 性 测试 (Security Testing) 就 是 要 验证 系统 的 保护 机 制 能 否 抵御 入 侵 者 的 攻击 。 

保护 测试 是 安全 性 测试 中 一 种 常见 的 测试 ,主要 用 于 测试 系统 的 信息 保护 机 制 。 

评价 安全 机 制 的 性 能 与 安全 功能 本 身 一 样 重要 ,其 中 安全 性 的 性 能 主要 包括 : 有 效 
性 、 生 存 性 、 精 确 性 、 反 应 时 间 吞吐 量 。 

安全 性 测试 常用 的 测试 用 例 设计 方法 有 : 规范 导出 法 ;边界 值 测 试 ;错误 猜测 法 ; 基 
于 风险 的 测试 ;故障 插入 技术 。 


7.2.7 失效 恢复 测试 


失效 恢复 测试 (Recovery Testing) 的 目标 就 是 验证 系统 从 软件 或 者 硬件 失效 中 恢复 
的 能 力 。 失 效 恢复 测试 采用 各 种 人 为 干预 方式 使 软件 出 错 , 造 成 人 为 的 系统 失效 ,进而 检 
验 系统 的 恢复 能 力 。 如 果 这 一 恢复 需要 人 为 干预 , 则 应 考虑 平均 修复 时 间 是 否 在 限定 的 
范围 内 。 

失效 恢复 测试 常用 的 测试 用 例 设计 方法 有 : 规范 导出 法 ;错误 猜测 法 ;基于 故障 的 测 
试 ;基于 风险 的 测试 。 


7.2.8 备份 测试 


备份 测试 (Backup Testing) 是 失效 恢复 测试 的 补充 ,目的 是 验证 系统 在 软件 或 者 硬 
件 失效 的 事件 中 备份 其 数据 的 能 力 。 

备份 测试 常用 的 测试 用 例 设 计 方 法 有 : 规范 导出 法 ;错误 猜测 法 ;基于 故障 的 测试 ; 
基于 风险 的 测试 。 


7.2.9 GUI 测试 


GUI 测试 与 用 户 友 好 性 测试 和 可 操作 性 测试 有 重复 ,但 GUI 测试 更 关注 对 图 形 界面 
的 测试 。 

GUI 测试 分 为 两 个 部 分 ,一 方面 是 界面 实现 与 界面 设计 的 情况 要 符合 ; 另 一 方面 是 
要 确认 界面 能 够 正确 处 理事 件 。 

GUI 测试 设计 测试 用 例 一 般 要 从 以 下 4 方面 考虑 : 

(1) 划分 界面 元 素 , 并 根据 界面 的 复杂 性 进行 分 层 。 通 常 把 界面 划分 为 三 个 层次 ,第 
一 层 是 界面 原子 层 ; 第 二 层 是 界面 组 合 元 素 层 ;第 三 层 是 一 个 完整 的 窗口 。 

(2) 在 不 同 的 界面 层次 确定 不 同 的 测试 策略 。 

(3) 进行 测试 数据 分 析 ,提取 测试 用 例 。 

(4) 使 用 自动 化 测试 工具 进行 脚本 化 工作 。 
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GUI 测试 常用 的 测试 用 例 设 计 方 法 有 : 规范 导出 法 ;等 价 类 测试 ;边界 值 测试 ;因果 
图 法 ;判断 表 法 ;错误 猜测 法 。 


7.2.10 健壮 性 测试 


健壮 性 测试 (Robustness Testing) 又 称 容 错 测试 ,用 于 测试 系统 在 出 故障 时 ,是 否 能 
自动 恢复 或 者 忽略 故障 继续 运行 。 

健壮 性 测试 的 一 般 方法 是 软件 故障 插入 测试 。 在 软件 故障 插入 测试 技术 中 ,需要 关 
注 三 个 方面 : 目标 系统 、 故 障 类 型 和 插入 故障 的 方法 。 

健壮 性 测试 常用 的 测试 用 例 设计 方法 有 : 故障 插入 测试 ;变异 测试 ;错误 猜测 法 。 


7.2.11 兼容 性 测试 


兼容 性 测试 (Compatibility Testing) 就 是 检验 被 测 的 应 用 系统 对 其 他 系统 的 兼容 性 。 
兼容 性 测试 常用 的 测试 用 例 设 计 方法 有 : 规范 导出 法 ;错误 猜测 法 。 


7.2.12 易 用 性 测试 


易 用 性 测试 (Usability Testing) 与 可 操作 性 测试 类 似 , 是 检测 用 户 在 理解 和 使 用 系统 
方面 是 否 方便 。 易 用 性 测试 是 面向 用 户 的 系统 测试 ,包括 对 被 测 系统 的 系统 功能 、 系 统 发 
布 、 帮 助 文本 和 过 程 等 的 测试 。 最 好 在 开发 阶段 就 开始 进行 。 

易 用 人 性 测试 常用 的 测试 用 例 设 计 方法 有 : 规范 导出 法 ;错误 猜测 法 。 


7.2.13 安装 测试 


安装 测试 (Installation Testing) 的 目的 就 是 验证 成 功 安 装 系统 的 能 力 。 
安装 测试 常用 的 测试 用 例 设计 方法 有 : 规范 导出 法 ;错误 猜测 法 。 


7.2.14 文档 测试 

文档 测试 (Documentation Testing) 主 要 是 针对 系统 提交 给 用 户 的 文档 进行 验证 。 文 
档 测试 的 目标 是 验证 用 户 文档 的 正确 性 并 保证 操作 手册 的 过 程 能 正常 工作 。 

文档 测试 的 测试 用 例 设 计 方 法 采用 规范 导出 法 。 
7.2.15 在 线 帮助 测试 


在 线 帮助 测试 (Online Help Testing) 用 于 检验 系统 的 实时 在 线 帮 助 的 可 操作 性 和 准 
确 性 。 
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在 线 帮 助 测试 的 测试 用 例 设计 方法 采用 规范 导出 法 。 
7.2.16 数据 转换 测试 

数据 转换 测试 (Data Conversion Testing) 的 目标 是 验证 已 存在 数据 的 转换 并 载 入 一 
个 新 的 数据 库 是 否 有 效 。 

数据 转换 测试 的 测试 用 例 设计 方法 采用 规范 导出 法 。 
7.3 系统 测试 的 实施 


系统 测试 开始 于 已 集成 软件 的 确认 测试 ,经 过 对 包括 软件 在 内 的 系统 产品 进行 的 a 
测试 ,8 测试 直至 验收 测试 ,目的 是 保证 软件 产品 能 按照 合同 要 求 工作 ,满足 用 户 的 要 求 。 


7.3.1 确认 测试 


确认 测试 (Validation Testing) 又 称 有 效 性 测试 ,其 任务 就 是 确认 软件 的 有 效 性 , 即 确 
认 软 件 的 功能 和 性 能 及 其 他 特性 是 否 与 用 户 的 要 求 一 致 。 
在 这 一 阶段 要 做 的 主要 工作 是 进行 功能 测试 和 软件 配置 复审 。 


7.3.2 & 测试 和 $B 测试 


a 测试 是 用 户 在 开发 环境 下 进行 的 测试 ,也 可 以 是 产品 供应 商 内 部 的 用 户 在 模拟 实 
际 操 作 环 境 下 进行 的 测试 。 软 件 在 一 个 自然 设置 状态 下 使 用 ,开发 者 坐 在 用 户 旁 边 , 随 时 
记 下 错误 情况 和 使 用 中 的 问题 。 这 是 在 受 控制 环境 下 进行 的 测试 。 

B 测 试 是 由 软件 的 多 个 用 户 在 一 个 或 多 个 用 户 的 实际 使 用 环境 下 进行 的 测试 。 这 些 
用 户 是 与 产品 供应 商 签订 了 支持 产品 预 发 行 合同 的 外 部 客户 ,他 们 要 求 使 用 该 产品 ,并 愿 
意 返回 有 关 错 误 信 息 给 开发 者 。B 测试 通常 是 在 不 受 控制 的 环境 下 进行 的 测试 。 与 a 测 
试 不 同 的 是 ,开发 者 通常 不 在 测试 现场 。 


7.3.3 验收 测试 

验收 测试 (Acceptance Testing) 是 以 用 户 为 主 的 测试 ,软件 开发 人 员 和 质量 保证 人 员 
也 应 参加 ,由 用 户 参 加 设计 测试 用 例 , 使 用 用 户 界 面 输入 测试 数据 ,并 分 析 测 试 的 输出 
结果 。 
7.3.4 回归 测试 


回归 测试 (Regression Testing) 是 在 软件 变更 之 后 ,对 软件 重新 进行 的 测试 ,其 目标 
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是 检验 对 软件 进行 的 修改 是 否 正确 ,保证 改动 不 会 带 来 不 可 预料 的 行为 或 者 另外 的 错误 。 


7.3.5 系统 测试 问题 总 结 、 分 析 


对 系统 测试 问题 的 总 结 与 分 析 是 指 问题 数 与 严重 级 别 分 布 , 是 评估 当前 系统 质量 和 


测试 质量 的 基础 。 
科学 地 界定 问题 级 别 , 是 数据 分 析 和 评估 的 基础 和 科学 化 的 要 求 。 问 题 严重 级 别 划 
分 如 下 : 


(1) 致命 问题 一 一 对 应 于 系统 的 可 用 人 性。 
(2) 严重 问题 一 一 用 于 分 析 版 本 稳定 性 。 
(3) 一 般 问题 一 一 用 于 评估 测试 效率 。 

(4) 提示 问题 一 一 用 于 产品 的 完善 性 指标 。 


7.4 如 何 做 好 系统 测试 


系统 测试 实际 上 贯穿 软件 开发 的 周期 ,在 软件 生存 周期 各 个 阶段 都 有 系统 测试 设计 
和 实现 的 过 程 ,下 面 是 做 好 系统 测试 的 原则 : 

(1) 所 有 的 测试 都 应 追溯 到 用 户 需求 。 

(2) 在 测试 工作 真正 开始 之 前 ,尽早 开始 测试 计划 。 

(3) Pareto 原则 应 用 于 软件 测试 (Pareto 原则 表明 测试 发 现 的 错误 中 的 80% 很 可 能 
起 源 于 20% 的 程序 模块 ) 。 

(4) 系统 缺陷 应 记 入 文档 。 


7.5 本 章 小 结 


本 章 曾 述 了 系统 测试 分 析 的 5 个 层次 ,分 别 是 : 用 户 层 、 应 用 层 、 功 能 层 、 子 系统 层 和 
协议 /指标 层 , 常 用 的 系统 测试 的 方法 ,系统 测试 的 实施 步骤 以 及 系统 测试 的 原则 。 
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第 8 章 面向 对 象 软件 的 测试 
8.1 面向 对 象 软件 测试 的 问题 


8.1.1 面向 对 象 的 基本 特点 引起 的 测试 问题 


面向 对 象 的 三 个 主要 特点 : 封装 .继承 和 多 态 ,这 三 个 特点 为 测试 带 来 了 很 多 问题 。 

1. 封装 

在 面向 对 象 中 ,封装 包含 两 方面 的 含义 : 一 是 指 信息 隐蔽 ,二 是 指 一 组 相关 的 变量 和 
方法 被 封装 在 同一 个 类 中 。 测 试 时 需要 考虑 : 

(1) 信息 隐蔽 对 测试 执行 的 影响 ; 

(2) 实例 状态 与 类 的 测试 序列 。 


2. 继承 


继承 是 面向 对 象 中 的 一 个 重要 机 制 , 它 允许 子 类 直接 获得 父 类 的 属性 和 方法 ,从 而 实 
现 对 父 类 的 复 用 。 测 试 时 需要 考虑 : 

(1) 继承 对 测试 充分 性 的 影响 ; 

(2) 误 用 对 测试 的 影响 。 


3. 多 态 


多 态 是 指 对 一 个 类 的 引用 可 以 与 多 个 类 的 实现 绑 定 , 绑 定 分 为 静态 绑 定 和 动态 绑 定 。 
尊 态 绑 定 是 指 在 编译 时 刻 就 完成 的 绑 定 ,而 动态 绑 定 是 指 在 运行 时 刻 完成 的 绑 定 。 动 态 
绑 定 对 测试 的 影响 首先 体现 在 测试 的 充分 性 上 。 

在 C++ 语言 对 多 态 的 实现 中 ,只 有 虚 方法 才 可 以 进行 动态 绑 定 ,而 普通 方法 不 进行 
动态 绑 定 。 


4. 继承 和 多 态 复合 


在 面向 对 象 中 ,继承 和 多 态 复合 在 一 起 可 以 产生 多 种 变化 ,这 一 方面 可 以 帮助 程序 员 
设计 出 许多 精巧 的 代码 ,也 使 得 因 使 用 不 当 而 引起 的 错误 难以 被 测试 发 现 。 测 试 时 需要 
考虑 : 

(1) 抽象 类 对 测试 执行 的 影响 ; 

(2) 误 用 对 测试 的 影响 。 
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8.1.2 面向 对 象 程序 的 测试 组 织 问题 


通过 执行 程序 代码 完成 的 测试 通常 包括 单元 测试 、 集 成 测试 和 系统 测试 三 个 主要 方 
面 。 对 于 传统 的 结构 化 程序 ,单元 测试 是 指针 对 完成 单一 功能 的 函数 的 测试 ,集成 测试 是 
指针 对 程序 中 的 集成 结构 的 测试 ,而 系统 测试 是 指 测试 整个 应 用 系统 是 否 满足 用 户 需求 。 

单元 测试 的 基本 要 求 是 被 测 单元 能 够 被 独立 地 测试 。 在 测试 面向 对 象 程序 时 ,由 于 
一 个 类 的 各 个 成 员 方 法 通常 是 相互 依赖 的 ,因此 很 难 对 一 个 类 中 的 单个 成 员 方 法 进行 充 
分 的 单元 测试 。 面 向 对 象 的 一 个 类 其 至 都 不 能 作为 可 以 被 独立 测试 的 单元 ,主要 原因 是 ; 

(1) 由 于 继承 的 存在 ,一 个 类 通常 依赖 于 其 父 类 和 其 他 祖先 类 ; 

(2) 面向 对 象 程序 中 经 常 出 现 多 个 类 相互 依赖 ,从 而 导致 每 个 类 难以 被 独立 地 测试 。 

集成 测试 一 般 是 针对 程序 的 集成 结构 进行 的 。 在 面向 对 象 的 程序 中 ,许多 集成 机 制 
在 传统 结构 化 程序 中 很 少见 ,对 于 这 些 机 制 的 测试 难以 直接 应 用 到 传统 结构 化 程序 的 集 
成 测试 中 。 类 似 地 ,对 于 由 多 个 类 组 成 的 继承 树 的 测试 ,传统 的 集成 测试 技术 也 难以 
适用 。 


8.2 面向 对 象 软件 的 测试 模型 及 策略 
8.2.1 面向 对 象 软件 的 测试 模型 
图 8-1 是 一 个 贯穿 面向 对 象 软件 开发 全 过 程 的 测试 模型 。 
该 模型 把 面向 对 象 软件 的 测试 活动 分 为 面向 对 象 分 STR 


析 的 测试 (OOA)、 面 向 对 象 设计 的 测试 (OOD Test)、 面 GOP 测试 ( 章 元 集成 ) 
向 对 象 编程 的 测试 (OOP Test) 和 面向 对 象 软件 (OOS 00D 测 斌 


Test) 的 系统 测试 ,而 面向 对 象 编程 的 测试 (OOP) 又 可 分 OOA OOP 
为 单元 测试 (Unit) 和 集成 测试 (Integration) 。 测试 | 00D 

OOA 
8.2.2 面向 对 象 分 析 的 测试 图 8-1 面向 对 象 的 测试 模型 


面向 对 象 分 析 的 测试 主要 包括 两 个 方面 : 

(1) 检查 分 析 结 果 是 否 符合 相应 的 面向 对 象 分 析 方 法 的 要 求 。 

(2) 检查 分 析 结果 是 否 可 以 满足 软件 需求 。 

在 Coad 和 Yourdon 提出 的 面向 对 象 分 析 方法 中 ,分 析 结 果 主 要 包括 5 部 分 : 对 象 、 
结构 .主题 .属性 和 实例 连接 .服务 和 消息 连接 。 


8.2.3 面向 对 象 设 计 的 测试 


面向 对 象 设计 的 测试 主要 包括 三 个 方面 : 
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(1) 对 设计 结果 本 身 的 审查 。 

(2) 设计 结果 与 分 析 结 果 一 致 性 的 审查 。 

(3) 设计 结果 对 编程 的 支持 。 

OOD 与 OOA 的 主要 区 别 是 : 在 OOD 中 要 考虑 与 实现 相关 的 内 容 , 而 在 OOA 中 不 
需要 考虑 与 实现 相关 的 内 容 。 


8.2.4 面向 对 象 编程 的 测试 


面向 对 象 编程 的 测试 主要 包括 两 个 方面 : 

Q@ 对 执行 代码 进行 测试 ; 

@ 检查 代码 风格 。 

对 于 有 一 定 规模 的 程序 而 言 ,把 整个 程序 放 在 一 起 进行 充分 的 测试 非常 困难 ,一 般 的 
方法 是 把 程序 的 各 个 组 成 部 分 分 别 进行 测试 。 有 时 候 需 要 把 儿 个 类 放 在 一 起 进行 测试 ， 
这 时 候 应 当 重 点 测试 各 个 类 之 间 的 交互 。 当 检查 代码 风格 的 时 候 ,首先 需要 检查 代码 的 
风格 是 否 符 合 要 求 , 其 次 需要 检查 代码 中 是 否 存 在 不 好 的 控制 结构 ,不 好 的 控制 结构 通常 
是 隐患 ,可 能 会 影响 以 后 的 开发 和 维护 。 


8.2.5 面向 对 象 程序 的 单元 测试 


由 于 面向 对 象 的 程序 中 可 独立 被 测试 的 单元 通常 是 一 个 类 族 或 最 小 是 一 个 独立 的 
类 ,面向 对 象 的 单元 测试 可 以 分 为 几 个 层次 : 

(1) 方法 层次 的 测试 ; 

(2) 类 和 类 族 层次 的 测试 。 

具体 的 单元 测试 技术 在 本 章 8. 3 节 进 行 详 细 描述 。 


8.2.6 面向 对 象 程序 的 集成 测试 


在 单元 测试 的 基础 上 ,集成 测试 的 目的 是 测试 系统 的 各 个 组 成 部 分 放 在 一 起 是 否 能 
够 协调 一 致 。 这 里 将 介绍 的 集成 测试 策略 既 包 含 了 常见 的 集成 测试 策略 ,也 有 针对 面向 
对 象 的 程序 或 常用 于 面向 对 象 程序 的 集成 测试 策略 。 另 外 ,由 于 面向 对 象 的 程序 中 类 间 
的 连接 方式 与 结构 化 软件 中 函数 间 的 连接 方式 存在 不 同 , 在 集成 测试 时 需要 对 其 进行 有 
针对 性 的 处 理 。 


8.2.7 面向 对 象 软件 的 系统 测试 
为 了 反映 用 户 的 使 用 情况 ,系统 测试 应 该 尽 可 能 建立 在 用 户 实际 使 用 环境 上 。 在 进 


行 系统 测试 时 ,通常 不 关心 软件 的 各 个 实体 的 具体 实现 细节 以 及 实体 间 的 连接 细节 。 因 
此 ,系统 测试 主要 是 黑 盒 测试 。 
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8.3 面向 对 象 程序 的 单元 测试 


由 于 面向 对 象 的 软件 中 可 独立 被 测试 的 单元 通常 是 一 个 类 族 或 最 小 是 一 个 独立 的 
类 ,所 以 面向 对 象 的 单元 测试 可 以 分 为 几 个 层次 。 


8.3.1 方法 层次 的 测试 


对 于 一 个 方法 ,可 以 将 其 看 作 关于 输入 参数 和 所 在 类 的 成 员 变 量 的 一 个 独立 函数 ,如 
果 该 函数 的 内 聚 性 很 高 ,功能 也 比较 复杂 ,可 以 对 其 单独 进行 测试 。 一 般 只 有 少数 方法 需 
要 进行 单独 测试 ,这 是 因为 有 很 多 方法 与 成 员 变 量具 有 很 强 的 关联 性 。 对 单个 成 员 方 法 
的 测试 类 似 于 传统 软件 测试 中 对 单个 函数 的 测试 ,很 多 测试 技术 都 可 以 应 用 到 这 里 来 。 

这 里 常用 的 测试 技术 有 : 

(1) 等 价 类 划分 测试 。 根 据 输入 参数 把 取 值 域 分 成 若干 个 等 价 类 。 

(2) 组 合 功 能 测试 : 针对 那些 依据 输入 参数 和 成 员 变 量 的 不 同 取 值 组 合 而 选择 不 同 
动作 的 方法 。 

(3) 递归 函数 测试 : 自己 调用 自己 的 方法 。 

(4) 多 态 消 息 测试 。 


8.3.2 类 层次 的 测试 


很 多 成 员 方法 会 通过 成 员 变 量 产生 相互 依赖 的 关系 ,这 将 导致 很 难 对 单个 成 员 方法 
进行 充分 的 测试 。 合 理 的 测试 是 将 相互 依赖 的 成 员 方法 放 在 一 起 进行 测试 ,这 就 是 所 谓 
的 类 层次 测试 。 

这 里 常用 的 测试 技术 有 : 

(1) 不 变 式 边界 测试 。 首 先 准确 定义 类 的 不 变 式 ,其 次 寻找 成 员 方法 的 调用 序列 ,以 
违反 类 的 不 变 式 ,这 些 调用 序列 即 可 作为 测试 用 例 。 

(2) 模 态 类 测试 : 模 态 类 是 指 对 该 类 所 接受 的 成 员 方法 的 调用 序列 设置 一 定 的 限 
制 。 这 时 ,需要 对 类 的 状态 进行 建 模 , 确 定 类 的 不 同 状 态 、 每 个 状态 下 可 以 接受 的 成 员 方 
法 调用 以 及 状态 间 的 转换 关系 ,从 而 获得 类 的 状态 转换 图 。 根 据 状态 转换 图 ,可 以 生成 调 
用 序列 来 覆盖 状态 转换 图 上 的 边 和 路 径 。 每 个 调用 序列 可 以 作为 一 个 测试 用 例 。 

(3) 非 模 态 类 测试 : 该 类 所 接受 的 成 员 方法 的 调用 序列 没有 任何 限制 。 可 以 避免 很 
多 因 状 态 引 起 的 麻烦 ,但 整个 测试 不 能 以 状态 图 为 指导 。 


8.3.3 类 树 层 次 的 测试 


面向 对 象 中 有 集成 和 多 态 现象 ,所 以 对 子 类 的 测试 通常 不 能 限定 在 子 类 中 定义 的 成 
员 变 量 和 成 员 方法 上 ,还 要 考虑 父 类 对 子 类 的 影响 。 
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这 里 常用 的 测试 技术 有 : 

(1) 多 态 服务 测试 。 多 态 服务 测试 是 为 了 测试 子 类 中 的 多 态 方法 的 实现 是 否 保持 了 
父 类 对 该 方法 的 规格 说 明 。 

(2) 展 平 测试 。 将 子 类 自身 定义 的 成 员 方 法 和 成 员 变量 以 及 从 父 类 和 祖先 类 继承 来 
的 成 员 方 法 和 成 员 变 量 全 部 放 在 一 起 组 成 一 个 新 类 ,并 对 其 进行 测试 。 展 平 后 的 类 的 规 
模 可 能 会 相当 大 ,这 会 给 测试 带 来 昂贵 的 代价 ,因此 需要 尽 可 能 地 减少 不 必要 的 代价 。 在 
最 复杂 的 情况 下 ,对 子 类 的 测试 可 能 只 采用 展 平 测 试 策 略 。 


8.4 面向 对 象 程序 的 集成 测试 
8.4.1 面向 对 象 程序 的 集成 测试 策略 


在 单元 测试 的 基础 上 ,集成 测试 的 目的 是 测试 系统 的 各 个 组 成 部 分 放 在 一 起 是 否 能 
够 协调 一 致 。 在 集成 测试 中 ,除了 需要 考虑 测试 用 例 生成 ,测试 用例 执行 、 测 试 结果 判断 
等 问题 外 ,选择 哪些 实体 进行 集成 也 是 一 个 需要 考虑 的 问题 ,这 就 是 所 谓 的 集成 测试 策略 
问题 。 面 向 对 象 程序 集成 测试 策略 主要 有 : 

(1) 传统 的 集成 测试 策略 。 

主要 有 大 突击 集成 测试 、 自 底 向 上 集成 测试 、 自 顶 向 下 集成 测试 .夹层 式 集成 测试 。 

(2) 协作 集成 。 

协作 集成 就 是 在 集成 测试 时 ,针对 系统 完成 的 功能 ,将 可 以 相互 协作 完成 特定 功能 的 
类 集成 在 一 起 进行 测试 。 优 点 是 : 编写 测试 驱动 和 测试 桩 的 开销 小 。 缺 点 是 : 当 协作 关 
系 复杂 时 ,测试 难以 充分 进行 ;与 传统 集成 测试 相 比 ,协作 集成 通常 不 完备 。 

(3) 基干 集成 。 

在 嵌入 式 系统 中 , 基 王 集成 划分 为 两 部 分 : 内 核 部 分 (基干 部 分 ) 和 外 围 应 用 部 分 。 
该 方法 的 优点 是 集中 了 传统 集成 的 优点 ,并 对 缺点 进行 了 控制 ,更 加 适合 大 型 复杂 项 目的 
集成 。 缺 点 是 : 必须 对 系统 的 结构 和 相互 依存 性 进行 分 析 ; 必 须 开 发 桩 模块 和 驱动 模块 
由 于 局 部 采用 一 次 性 集成 策略 导致 有 些 接口 可 能 测试 不 完整 。 

(4) 高 频 集 成 。 

高 频 集 成 一 般 采 用 冒 烟 测试 的 方式 , 即 不 预测 每 个 测试 用 例 的 预期 结果 ,如 果 测 试 中 
未 出 现 反常 情况 ,就 认为 通过 测试 。 高 频 集 成 有 三 个 主要 步骤 : 开发 人 员 完 成 要 提供 
代码 的 增 量 构件 ,同时 测试 人 员 完成 相关 的 测试 包 ;@ 集 成 测试 人 员 将 开发 人 员 新 增 或 修 
改 的 构件 集中 起 来 形成 一 个 新 的 集成 体 ;@ 评 价 结果 。 

优点 是 : 高 效 性 、 可 预测 性 、 并 行 性 、 尽 早 查 出 错误 、 易 进行 错误 定位 、 对 桩 模块 需要 
不 是 必需 的 。 

缺点 是 : 车 测试 包 过 于 简单 ,可 能 难以 发 现 问 题 ;开始 不 能 平稳 集成 ;车 没有 建立 适 
当 的 标准 可 能 会 增加 风险 。 

(5) 基于 事件 (消息 ) 的 集成 。 

基于 事件 (消息 ) 的 集成 就 是 从 验证 消息 路 径 的 正确 性 出 发 , 渐 增 式 地 把 系统 集成 在 
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一 起 ,从 而 验证 系统 的 稳定 性 。 

(6) 基于 使 用 的 集成 。 

基于 使 用 的 集成 (Use-Based Integration) 从 分 析 类 之 间 的 依赖 关系 出 发 ,通过 从 对 其 
他 类 依赖 最 少 的 类 开始 集成 ,逐步 扩大 到 有 依赖 关系 的 类 ,最 后 集成 到 整个 系统 。 

(7) 客户 机 /服务 器 的 集成 。 

客户 机 /服务 器 的 集成 (Client/Server Integration) 不 存在 独立 控制 轨迹 ,每 个 系统 构 
件 都 有 自己 的 控制 策略 。 优 点 是 : 避免 了 一 次 性 集成 的 风险 ;次序 没 有 大 的 约束 ;有 利于 
复 用 和 扩充 ;支持 可 控制 和 可 重复 的 测试 。 缺 点 是 : 测试 驱动 代码 和 桩 代码 的 开发 成 
本 高 。 

(8) 分 布 式 集成 。 

分 布 式 集成 (Distributed Services Integration) 用 于 测试 松散 耦合 的 同 级 构件 之 间 交 
互 的 稳定 性 , 优 缺 点 与 客户 机 /服务 器 的 集成 类 似 。 


8.4.2 针对 类 间 连 接 的 测试 


集成 策略 反映 了 集成 测试 中 如 何 选择 每 轮 测试 的 对 象 , 实 际 测试 中 为 保证 测试 充分 ， 
常 考虑 测试 类 间 的 连接 ,常用 技术 有 : 

(1) 类 关联 的 多 重 性 测试 。 

在 面向 对 象 中 ,类 间 的 关联 关系 存在 多 重 性 方面 的 限制 ,对 多 重 性 的 测试 是 针对 类 间 
连接 测试 的 重要 方面 。 此 时 ,测试 关注 的 重点 是 与 连接 关系 有 关 的 增删 改 操作 。 

(2) 受 控 异 常 测试 。 

异常 处 理 是 多 数 面向 对 象 编程 语言 的 重要 机 制 , 它 允许 程序 的 控制 流 在 出 现 特殊 情 
况 时 跳 转 到 特定 的 位 置 。 由 于 使 用 异常 处 理 , 异 常 的 抛 出 和 异常 的 接收 可 以 被 放 在 不 同 
的 类 中 ,这 实际 上 是 类 间 隐 含 的 控制 依赖 关系 。 在 测试 时 ,需要 尽 可 能 地 覆盖 这 些 隐 式 的 

(3) 往返 场景 测试 。 

在 面向 对 象 中 ,许多 功能 是 通过 多 个 类 相互 协作 完成 的 ,往返 场景 测试 就 是 针对 类 间 
协作 的 一 种 测试 技术 。 本 质 上 讲 ,往返 场景 测试 就 是 把 与 实现 特定 场景 相 联系 的 代码 抽 
取出 来 ,针对 这 些 代码 设计 具有 百分之百 (分 支 ) 覆 盖 率 的 测试 用 例 集 。 

(4) 模 态 机 测试 。 

模 态 机 测试 类 似 于 类 层次 的 模 层 次 的 模 态 类 测试 ,只 是 模 态 类 测试 是 针对 一 个 类 进 
行 的 ,而 模 态 机 测试 是 针对 多 个 类 进行 的 。 


8.5 面向 对 象 软件 的 系统 测试 


由 于 系统 测试 的 主要 目标 是 测试 开发 出 来 的 软件 是 否 是 问题 空间 的 一 个 合理 解 , 因 
此 对 于 系统 测试 而 言 ,面向 对 象 软件 与 传统 结构 化 软件 并 没有 本 质 区 别 。 
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8.5.1 功能 测试 

通常 采用 两 种 技术 进行 功能 测试 : 一 种 是 基于 大 纲 的 测试 ,这 也 是 传统 软件 系统 测 
试 经 常 采用 的 技术 ; 另 一 种 是 基于 用 例 的 测试 ,利用 OOA 文档 中 的 用 例 进行 的 系统 
测试 。 
8.5.2 其 他 系统 测试 


除 功 能 测试 外 ,完整 的 系统 测试 还 包括 性 能 测试 .兼容 性 测试 . 易 用 性 测试 和 文档 测 
试 等 ,这 些 与 传统 结构 化 软件 的 系统 测试 方法 相同 。 


8.6 ”本章 小 结 
本 章 阐述 了 因 面 向 对 象 的 基本 特点 引起 的 测试 问题 ,面向 对 象 软件 测试 模型 ,面向 对 


象 软件 的 单元 测试 ,面向 对 象 软件 的 集成 测试 ,针对 类 间 连 接 的 测试 策略 以 及 面向 对 象 软 
件 的 系统 测试 。 


第 9 章 软件 性 能 测试 基础 理论 


9.1 软件 性 能 定义 


软件 性 能 是 软件 的 一 种 非 功 能 特性 , 它 关 注 的 不 是 软件 是 否 能 够 完成 特定 的 功能 ,而 
是 在 完成 该 功能 时 展示 出 来 的 及 时 性 。 由 于 感受 软件 性 能 的 主体 是 人 ,不 同 的 人 对 同样 
的 软件 有 着 不 同 的 主观 感受 ,而 且 不 同 的 人 对 于 软件 性 能 关心 的 视角 也 不 同 。 下 面 来 看 
一 下 不 同 的 人 眼中 的 软件 性 能 定义 。 


9.1.1 用 户 眼中 的 软件 性 能 
从 用 户 的 角度 来 说 ,软件 性 能 是 软件 系统 对 用 户 提交 请 求 所 响应 的 时 间 。 通 俗 地 讲 ， 


如 果 用 户 单 击 一 个 提交 或 者 输入 一 个 URL 地 址 ,随后 系统 把 结果 呈现 在 用 户 眼 前 ,这 个 
过 程 所 花费 的 时 间 即 为 用 户 对 软件 性 能 的 直观 印象 ,如 图 9-1 所 示 。 


@ 发 出 请 求 _ 请 求 自 自 
用 户 感受 到 响应 ”返回 数据 和 
用 户 


应 用 服务 器 DB 服务 器 


应 用 界面 呈现 
呈现 时 间 人 系统 响应 时 间 
9-1 Web 系统 响应 


本 


用 户 不 关心 响应 时 间 中 哪些 是 软件 造成 的 ,哪些 是 硬件 造成 的 。 但 是 用 户 感受 到 的 
响应 时 间 既 有 客观 成 分 ,也 有 主观 成 分 ,甚至 是 心理 因素 。 


9.1.2 运 维 人 员 眼 中 的 软件 性 能 


从 运 维 人 员 的 角度 来 说 ,在 响应 时 间 方 面 的 理解 与 用 户 完全 一 致 。 但 是 运 维 人 员 是 
一 群 特殊 的 用 户 群 体 ,其 不 仅 关注 系统 的 响应 时 间 ,还 关注 服务 器 系统 资源 的 使 用 情况 。 
运 维 人 员 之 所 以 关注 资源 的 消耗 情况 ,是 因为 系统 响应 时 间 达 到 要 求 并 不 代表 系统 就 能 
正确 地 处 理 客户 端 提 交 的 请 求 ,如 银行 系统 ,假设 在 处 理 存款 业务 时 ,每 笔 业务 的 响应 时 
间 为 100ms, 但 当前 的 CPU 和 内 存 的 使 用 率 已 经 达到 了 90% ,超过 正常 使 用 的 阔 值 ,这 
样 虽 然 响应 时 间 符 合 要 求 ,但 是 不 能 保证 服务 器 不 出 问题 ,因为 服务 器 已 经 处 于 一 个 临界 
状态 ,很 可 能 出 现存 款 不 成 功 的 情况 ,如 果 这 样 的 话 , 即 使 响应 时 间 更 短 也 不 能 达到 性 能 
要 求 。 

另外 , 运 维 人 员 还 关注 系统 硬件 资源 的 可 扩展 性 即 规划 性 能 部 分 。 例 如 ,系统 现在 支 
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持 100 个 用 户 并 发 没 问 题 , 那 么 将 来 支持 200 个 用 户 并 发 是 否 会 出 现 性 能 问题 呢 ? 
9.1.3 开发 人 员 眼 中 的 软件 性 能 


从 软件 开发 工程 师 的 角度 来 说 ,他 们 关注 用 户 和 管理 员 关 注 的 所 有 问题 。 另 外 还 关 
注 内 存 泄露 .数据库 是 否 出 现 死 锁 .中 间 件 以 及 应 用 服务 器 等 问题 。 


9.1.4 Web 前 端 性 能 


前 端 性 能 ,尤其 是 Web 前 端 性 能 ,已 经 成 为 目前 Web 应 用 性 能 主要 被 关注 的 部 分 之 
一 。 随 着 Web 应 用 开发 技术 的 改变 , Web 应 用 响应 时 间 的 构成 越 来 越 复杂 ,Ajax 等 大 量 
前 端 技术 的 应 用 使 得 服务 器 的 响应 时 间 在 用 户 感受 到 的 响应 时 间 中 所 占 的 比例 越 来 越 
小 。 在 这 种 情况 下 , Web 前 端 性 能 越 来 越 受到 关注 。 

Web 应 用 的 前 端 响应 时 间 指 浏览 器 的 页 面 加 载 时 间 。 一 般 而 言 , 浏 览 器 的 页 面 加 载 
时 间 包 括 对 HTML 的 解析 、 对 页 面 上 的 图 片 及 CSS 等 文件 的 获取 和 加 载 、 客 户 端 脚本 
(JavaScript) 的 执行 时 间 以 及 对 页 面 进行 展现 所 花费 的 时 间 ,这 部 分 性 能 体现 就 被 称 为 前 
端 性 能 。 与 对 应 的 服务 器 性 能 不 同 ,前 端 性 能 的 产生 与 浏览 器 的 页 面 元 素 加 载 、. 客 户 端 代 
码 执行 以 及 页 面 展 现 相关 ,与 服务 器 本 身 并 无 太 大 的 关系 。 


9.2 性 能 测试 
9.2.1 性 能 测试 的 定义 


系统 的 性 能 是 一 个 很 大 的 概念 ,覆盖面 非 常 广泛 。 对 一 个 软件 系统 而 言 ,包括 执行 效 
率 、 资 源 占 用 、 稳 定性 、 安 全 性 ,兼容 性 、 可 扩展 性 ` 可 靠 性 等 。 性 能 测试 用 来 保证 产品 发 布 
后 系统 的 性 能 满足 用 户 的 需求 。 性 能 测试 在 软件 质量 保证 中 起 重要 作用 。 

性 能 测试 方法 是 指 通 过 模拟 生产 环境 运行 的 业务 压力 量 和 使 用 场景 组 合 , 测 试 系统 
的 性 能 是 否 满足 生产 性 能 要 求 。 这 种 性 能 测试 的 特点 有 : 

这 种 方法 的 主要 目的 是 验证 系统 是 否 有 系统 宣称 的 具体 的 能 力 。 

这 种 方法 需要 了 解 被 测 系统 的 典型 场景 ,并 具有 确定 的 性 能 目标 。 所 谓 典型 场景 就 
是 具有 代表 性 的 用 户 业务 操作 。 其 次 ,这 种 方法 具有 确定 的 性 能 目标 。 

这 种 方法 要 求 在 已 确定 的 环境 下 运行 。 


9.2.2 性 能 测试 的 目标 
性 能 测试 的 目标 是 验证 软件 系统 是 否 能 够 达到 用 户 提出 的 性 能 指标 ,同时 发 现 软件 


系统 中 存在 的 性 能 瓶颈 优化 软件 ,最 后 起 到 优化 系统 的 目的 ,主要 包括 以 下 几 个 方面 : 
(1) 评估 系统 的 能 力 。 测 试 中 得 到 的 负荷 和 响应 时 间 数 据 可 以 被 用 于 验证 所 计划 的 
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模型 的 能 力 ,并 帮助 做 出 决策 。 
(2) 识别 体系 的 弱点 。 受 控 的 负荷 可 以 被 增加 到 一 个 极端 的 水 平 ,并 突破 它 , 从 而 修 
复 体系 的 瓶颈 或 薄弱 的 地 方 。 


(3) 系统 调 优 。 重 复 运行 测试 ,验证 调整 系统 的 活动 得 到 了 预期 的 结果 ,从 而 改进 性 
能 。 检 测 软 件 中 的 问题 ,如 长 时 间 的 测试 执行 可 导致 程序 发 生 内 存 泄露 引起 的 失败 ,揭示 
程序 中 隐 含 的 问题 或 冲突 。 

(4) 验证 稳定 性 和 可 靠 性 。 在 一 个 生产 负荷 下 执行 测试 一 定 的 时 间 是 评估 系统 稳定 
性 和 可 靠 性 是 否 满足 要 求 的 唯一 方法 。 


9.3 性 能 测试 术语 


了 解 了 什么 叫 软件 性 能 之 后 ,需要 对 性 能 测试 过 程 的 常用 术语 有 一 个 详细 的 了 解 ,为 
后 面 的 性 能 测试 做 准备 。 下 面 介绍 性 能 测试 过 程 中 的 一 些 常用 术语 。 性 能 测试 过 程 中 的 
常用 术语 有 : 响应 时 间 、 并 发 用 户 数 、 乔 吐 量 、 知 叶 率 、TPS、 点 击 率 、 资 源 利用 率 、 性 能 计 
数 器 .思考 时 间 等 。 


9.3.1 响应 时 间 


响应 时 间 是 指 应 用 系统 从 发 出 请 求 开 始 到 客户 端 接收 到 所 有 数据 所 消耗 的 时 间 。 该 
定义 强调 所 有 数据 都 已 经 被 呈现 到 客户 端 所 花费 的 时 间 ,为 什么 说 是 所 有 数据 呢 ? 因为 
用 户 体验 的 响应 时 间 带 有 主观 性 ,用户 认为 从 提交 请 求 到 服务 器 开始 返回 数据 到 客户 端 
的 这 一 段 时 间 为 响应 时 间 。 

现在 对 响应 时 间 进 行 细 分 ,以 一 个 Web 应 用 的 页 面 响应 时 间 为 例 ,如 图 9-2 所 示 。 
从 图 中 可 以 看 到 ,页 面 的 响应 时 间 可 分 解 为 “网 络 传输 时 间 ”(Ni 十 N; 十 Ns 十 Ns) 和 “应 用 
延迟 时 间 ”(Ai 十 A: 十 As ) ,而 “应 用 延迟 时 间 ” 又 可 分 解 为 “数据 库 延 迟 时 间 ”(A:) 和 ”应 
用 服务 器 延迟 时 间 ”(Al 十 As ) 。 


Web 服 务 器 数据 库 服务 器 
网 络 
N, 痪 N | 
《 流 
> RS | 2 
客户 端 
图 9-2 响应 时 间 示 例 
9.3.2 并 发 用 户 数 


并 发 用 户 数 是 指 同一 时 刻 与 服务 器 进行 数据 交互 的 所 有 用 户 数量 。 概 念 中 有 两 点 需 
要 注意 。 第 一 : 同一 时 刻 , 因 为 并 发 强调 的 是 用 户 同时 对 服务 器 进行 施 压 。 例 如 : 一 个 
人 同时 挑 两 件 东 西 , 这 时 表示 两 件 东西 同时 被 这 个 人 挑 起 来 ,而 如 果 是 先 挑 一 件 , 再 挑 另 
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一 件 ,那么 就 无 法 表现 出 同时 的 概念 ,这 两 件 东 西 也 就 没有 同时 施 压 在 这 个 人 身上 。 第 
二 : 强调 要 与 服务 器 进行 数据 交互 ,如果 未 和 服务 器 进行 数据 的 交互 ,这 样 的 用 户 是 没 给 
服务 器 带 来 压力 的 。 同 样 是 上 面 的 例子 ,这 个 人 虽然 挑 了 两 件 东 西 , 但 是 其 中 有 一 件 是 没 
有 重量 的 , 那 就 是 说 只 有 一 件 对 这 个 人 造成 压力 。 

因此 对 于 并 发 用 户 这 个 概念 的 理解 经 常 出 现 以 下 两 种 误区 : 一 是 认为 系统 所 有 的 用 
户 都 叫做 并 发 用 户 ; 二 是 认为 所 有 的 在 线 用 户 都 是 并 发 用 户 。 在 线 用 户 不 一 定 是 并 发 用 
户 ,原因 是 在 线 用 户 不 一 定 与 系统 进行 了 数据 的 交互 ,例如 : 如 果 一 些 在 线 用 户 只 是 查看 
系统 上 的 一 些 信息 ,那么 这 些 在 线 用 户 不 能 作为 并 发 用 户 计算 ,因为 这 些 用 户 并 没有 与 系 
统 进行 交互 ,不 会 给 服务 器 带 来 任何 压力 。 

那么 并 发 用 户 如 何 计算 呢 ? 目前 并 没有 一 个 精确 的 计算 公式 ,很 多 情况 下 都 是 根据 
以 往 的 经 验 进行 估算 的 。 估 计 行业 的 不 同 , 并 发 用 户 数 也 会 有 所 不 同 , 像 电信 行业 并 发 用 
户 数 为 在 线 用 户 的 万 分 之 一 ,如 果 1000 万 在 线 用 户 , 那 么 需要 测试 1000 个 并 发 用 户 即 
可 。OA( 办 公 自 动 化 ) 系 统 的 并 发 用 户 数 一 般 是 在 线 用 户 的 2% 一 20% ,所 以 并 发 用 户 数 
很 大 程度 上 是 根据 经 验 和 行业 的 一 些 标准 来 计算 的 。 

关于 并 发 用 户 的 分 布 ,可 以 采用 以 下 三 种 方法 进行 分 析 : 

(1) 通过 参考 其 他 同类 产品 ; 

(2) 分 析 历 史 数 据 ; 

(3) 上 线 测试 运行 。 


9.3.3 吞吐 量 


在 性 能 测试 过 程 中 ,吞吐 量 是 指 单位 时 间 内 服务 器 处 理 客户 请 求 的 数量 ,吞吐 量 通常 
使 用 请 求 数 / 秒 来 衡量 ,并 直接 体现 服务 器 的 承载 能 力 。 
吞吐 量 作 为 性 能 测试 过 程 中 主要 关注 的 指标 之 一 , 它 与 虚拟 用 户 间 存 在 一 定 的 联系 ， 
当 系 统 没有 遇 到 性 能 瓶颈 时 ,可 以 采用 下 面 的 这 个 公理 
式 来 计算 。 复 
MiG 下 
人 
其 中 ,下 表示 吞吐 量 , Nvu 表 示 虚 拟 用 户 数 (Virtual 
User, VU) 的 个 数 ;R 表示 每 个 VU 发 出 的 请 求 数 UV 数量 
量 ;T 表 示人 性 能 测试 所 用 的 时 间 。 但 是 如 果 系 统 遇 到 图 9-3 吞吐 量 -VU 数量 关系 图 
性 能 瓶颈 ,这 个 公式 便 不 再 适用 。 乔 吐 量 与 VU 之 
间 的 关联 图 如 图 9-3 所 示 。 从 图 中 可 以 看 出 ,吞吐 量 在 VU 增长 到 一 定数 量 时 ,软件 系 
统 出 现 性 能 瓶颈 ,此 时 , 甜 吐 量 的 值 并 不 会 随 着 VU 数量 的 增加 而 增 大 ,而 是 趋 于 
平衡 。 
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9.3.4 吞吐 率 


吞吐 率 (Throughout) 是 指 单位 时 间 内 从 服务 器 返回 的 字 节 数 ,也 可 以 指 单位 时 间 内 
服务 器 处 理 客户 提交 的 请 求 书 。 它 是 衡量 网 络 性 能 的 一 个 重要 指标 。 吞吐 率 三 吞吐 量 / 
测试 时 间 。 通 常情 况 下 ,吞吐 量 的 值 越 大 ,吞吐 率 的 值 也 越 大 ,吞吐 率 的 值 越 大 系统 的 负 
载 能 力 越 强 。 


35 ‘TPS 


TPS(Transaction Per Second) 表 示 服 务 器 每 秒 处 理 的 事务 数 , 它 是 衡量 系统 处 理 能 
力 的 重要 指标 。 


9.3.6 点 击 率 


点 击 率 (Hit Per Second) 是 指 每 秒 钟 用 户 向 服务 器 提交 的 HTTP 数量 。 用 户 每 点 击 
一 次 ,服务 器 端 就 要 对 用 户 提交 的 请 求 进 行 一 次 处 理 , 从 事务 的 角度 来 说 ,如 果 把 每 次 点 
击 作为 一 次 提交 事务 来 对 待 ,那么 点 击 率 与 TPS 的 概念 是 等 同 的 。 对 于 Web 系统 来 说 ， 
“点 击 率 ” 是 服务 器 处 理 的 最 小 单位 ,点 击 率 的 值 越 大 ,说 明 服务 器 端 所 能 承受 的 压力 越 
大 。 因 此 通常 情况 下 , Web 服务 器 都 具有 防 刷新 的 机 制 , 因 为 客户 每 刷新 一 次 系统 就 要 
响应 一 次 点 击 , 如 果 不 对 服务 器 进行 防 刷新 处 理 , 当 用 户 不 停 地 点 击 刷新 按钮 ,此 时 服务 
器 将 承受 巨大 的 压力 。 

需要 注意 的 是 ,点 击 一 次 并 不 代表 客户 端 只 向 服务 器 端 发 送 一 个 HTTP 请 求 ,客户 
每 点 击 一 次 ,都 会 向 服务 器 端 发 出 多 个 HTTP 请 求 。 


9.3.7 资源 利用 率 


资源 利用 率 是 指 服务 器 系统 中 不 同 硬件 资源 被 使 用 的 程度 ,资源 利用 率 二 资源 实际 
使 用 量 / 总 的 可 用 资源 量 ,主要 包括 CPU 利用 率 、 内 存 利用 率 、 磁 盘 利 用 率 、 网 络 等 。 资 
源 利用 率 是 分 析 系 统 性 能 进而 改善 性 能 的 主要 依据 ,在 配置 调 优 测试 的 过 程 中 ,通过 比较 
配置 调 优 前 后 系统 的 资源 利用 率 来 判断 调 优 的 效果 。 


9.3.8 性 能 计数 器 


性 能 计数 器 (Counter) 是 描述 服务 器 或 者 操作 系统 性 能 的 一 些 数据 指标 ,主要 通过 添 
加 计数 器 来 观察 系统 资源 的 使 用 情况 。 性 能 计数 器 包括 操作 系统 性 能 计数 器 数据库 计 
数 器 .应 用 服务 器 计数 器 等 。 

计数 器 在 性 能 测试 过 程 中 发 挥 着 "监控 和 分 析 ” 的 关键 作用 ,尤其 是 在 分 析 系统 的 可 
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扩展 性 和 对 性 能 瓶颈 进行 定位 的 时 候 , 计 数 器 的 阔 值 起 着 非常 重要 的 作用 。 必 须 注意 的 
是 ,一 般 情况 下 ,单一 的 性 能 计数 器 只 能 体现 系统 性 能 的 某 一 个 方面 ,在 性 能 测试 过 程 中 
分 析 测 试 结果 时 ,必须 基于 多 个 不 同 的 计数 器 进行 分 析 。 

在 性 能 测试 中 常用 资源 利用 率 进 行 横向 对 比 。 如 在 进行 性 能 测试 时 发 现 , 某 个 资源 
的 使 用 率 很 高 ,几乎 达到 100% ,假设 该 资源 是 CPU ,而 其 他 资源 的 使 用 率 又 比较 低 , 这 时 
可 以 很 清楚 地 知道 ,CPU 是 系统 的 瓶颈 。 


9.3.9 思考 时 间 


思考 时 间 (Think Time) ,也 称 为 “休眠 时 间 ”, 是 指 用 户 在 进行 操作 时 ,每 个 请 求 之 间 
的 时 间 间 隔 。 对 于 交互 系统 来 说 ,用 户 不 可 能 持续 不 断 地 发 出 请 求 , 一 般 情 况 下 ,用 户 在 
向 服务 器 端 发 送 一 个 请 求 之 后 ,会 等 待 一 段 时 间 再 发 送 下 一 个 请 求 。 

在 测试 脚本 中 ,思考 时 间 为 脚本 中 两 条 请 求 语 句 之 间 的 时 间 间 隔 。 当 前 对 于 不 同 的 
性 能 测试 工具 提供 不 同 的 函数 来 实现 思考 时 间 ,在 实际 的 测试 过 程 中 ,如 何 设置 思考 时 间 
是 性 能 测试 工程 师 要 关心 的 问题 。 


9.4 软件 性 能 测试 方法 论 


“没有 规矩 ,不 成 方圆 ”对 性 能 测试 来 说 ,如 果 没 有 合适 的 方法 论 指导 ,性 能 测试 很 容 
易 成 为 一 种 随意 的 测试 行为 ,而 随意 进行 的 性 能 测试 很 难 取得 实际 的 作用 和 预期 的 效果 ， 
因此 本 小 节 介 绍 几 种 常见 的 性 能 测试 过 程 和 方法 。 


9.4.1 SEI 负载 测试 计划 过 程 


SEI 负载 测试 计划 过 程 (SEI Load Testing Planning Process) 是 一 个 关注 于 负载 测试 
计划 的 方法 ,其 目标 是 产生 “清晰 、 易 理解 、 可 验证 的 负载 测试 计划 ”。SEI 负载 测试 计划 
过 程 包括 6 个 关注 的 区 域 : 目标 、 用 户 、 用 例 、 生 产 环 境 、 测 试 环 境 和 测试 场景 ,其 主要 重 
点 关注 以 下 几 个 部 分 。 

(1) 生产 环境 与 测试 环境 的 不 同 : 由 于 负载 测试 环境 与 实际 的 生产 环境 存在 一 定 的 
差异 ,因此 ,在 测试 环境 上 对 应 用 系统 进行 的 负载 测试 结果 很 可 能 不 能 准确 反映 该 应 用 系 
统 在 生产 环境 上 的 实际 性 能 表现 ,为 了 规避 这 个 风险 ,必须 仔细 设计 测试 环境 。 

(2) 用 户 分 析 : 用 户 是 对 被 测 应 用 系统 性 能 表现 最 关注 和 受 影 响 最 大 的 对 象 , 因 此 ， 
必须 通过 对 用 户 行为 进行 分 析 ,依据 用 户 行为 模型 建立 用 例 和 场景 。 

(3) 用 例 : 用 例 是 用 户 使 用 某 种 顺序 和 操作 方式 对 业务 过 程 进 行 实现 的 过 程 。 对 负 
载 测 试 来 说 ,用 例 的 作用 主要 在 于 分 析 和 分 解 出 关键 的 业务 ,判断 每 个 业务 发 生 的 频 度 、 
业务 出 现 性 能 问题 的 风险 等 。 
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9.4.2 RBI 方 法 


RBI(Rapid Bottleneck Identify) 方 法 是 Empirix 公司 提出 的 一 种 用 于 快速 识别 系统 
性 能 瓶颈 的 方法 ,该 方法 基于 以 下 一 些 事实 ; 

(1) 发 现 的 80% 系 统 的 性 能 瓶颈 都 由 吞吐 量 制约 ; 

(2) 并 发 用 户 数 和 吞吐 量 瓶颈 之 间 存 在 一 定 的 关联 ; 

(3) 采用 吞吐 量 测试 可 以 更 快速 地 定位 问题 。 

RBI 方 法 首先 访问 服务 器 上 的 “小 页 面 " 和 “简单 应 用 ”, 从 应 用 服务 器 、 网 络 等 基础 的 
层次 上 了 解 系 统 知 吐 量 表现 ;其 次 选择 不 同 的 场景 , 设 定 不 同 的 并 发 用 户 数 ,使 其 吞吐 量 
保持 基本 一 致 的 增长 趋势 ,通过 不 断 增 加 并 发 用 户 数 和 吞吐 量 , 观 察 系统 的 性 能 表现 。 

在 定位 具体 的 性 能 瓶颈 时 ,RBI 将 性 能 瓶颈 的 定位 按照 一 种 “ 自 上 而 下 ”的 分 析 方 式 
进行 分 析 , 首 先 确定 是 由 并 发 还 是 由 吞吐 量 引发 的 性 能 表现 限制 ,然后 从 网 络 数据库 ,应 
用 服务 器 和 代码 本 身 4 个 环节 确定 系统 性 能 具体 的 瓶颈 。 

RBI 方 法 在 性 能 瓶颈 的 定位 过 程 中 能 发 生 良 好 的 作用 ,其 对 性 能 分 析 和 瓶颈 定位 的 
方法 值得 借鉴 ,但 也 不 是 完整 的 性 能 测试 过 程 。 


9.4.3 性 能 下 降 曲线 分 析 法 


性 能 下 降 曲 线 实际 上 描述 的 是 性 能 随 用 户 数 增加 而 出 现下 降 趋势 的 曲线 。 而 这 里 所 
说 的 性 能 可 以 是 响应 时 间 , 也 可 以 是 乔 吐 量 或 单 击 数 / 秒 的 数据 。 当 然 ,一 般 来 说 ,性 能 主 
要 是 指 响 应 时 间 。 

如 图 9-4 所 示 为 一 条 响应 时 间 性 能 下 降 曲 线 。 


响应 时 间 /s 


单 用 户 
区 域 一 4 


Homepage 2 


Pagel 


50 125 | 150 
用 户 用 户 | 用户 | 用 户 | 用户 


4.48 | 4.59 | 4.48 | 5.07 | 533 | 6.89 
3.60 | 3.81 | 3.71 | 4.19 | 4.71 | 4.85 


图 9-4 典型 的 响应 时 间 性 能 下 降 曲 线 


从 图 9-4 可 以 看 到 ,一 条 响应 时 间 性 能 下 降 曲 线 可 以 分 为 以 下 几 个 部 分 : 
单 用 户 区 域 一 一 对 系统 的 一 个 单 用 户 的 响应 时 间 。 这 对 建立 性 能 的 参考 数值 很 有 
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帮助 。 

性 能 平坦 区 一 一 在 不 进行 更 多 性 能 调 优 的 情况 下 所 能 期 望 达到 的 最 佳 性 能 。 该 区 域 
可 被 用 作 基 线 或 是 benchmark 。 

压力 区 域 一 一 应 用 轻微 下 降 的 区 域 。 典 型 的 .最 大 的 建议 用 户 负 载 是 压力 区 域 的 
开始 。 

拐点 一 一 性 能 开始 急剧 下 降 的 点 。 

这 几 个 区 域 实际 上 明确 标识 了 系统 性 能 最 优秀 的 区 间 、 系 统 性 能 开始 变 坏 的 区 间 ,以 
及 性 能 出 现 急剧 下 降 的 点 。 对 性 能 测试 来 说 ,找到 这 些 区 间 和 拐点 ,也 就 可 以 找到 性 能 瓶 
颈 产 生 的 地 方 。 

对 性 能 下 降 曲 线 分 析 法 来 说 ,主要 关注 的 是 性 能 下 降 曲 线 上 的 各 个 区 间 和 相应 的 拐 
点 ,通过 识别 不 同 的 区 间 和 拐点 ,从 而 为 性 能 瓶 贷 识别 和 性 能 调 优 提供 依据 。 


9.4.4 LoadRunner 的 性 能 测试 过 程 


图 9-5 给 出 了 LoadRunner 的 性 能 测试 过 程 。LoadRunner 将 性 能 测试 过 程 分 为 计 
刘 测试 测试 设计 .创建 YU 脚本 、 创 建 测试 场景 、 运 第 和 计划 测试 | 
行 测试 场景 和 分 析 结 果 6 个 步骤 。 

计划 测试 阶段 主要 进行 测试 需求 的 收集 、 典 型 第 2 步 测试 设计 | 
场景 的 确定 ;测试 涉及 阶段 主要 进行 测试 用 例 的 设 
计 ; 创 建 VU 脚本 阶段 主要 根据 设计 的 用 例 创 建 脚 


第 3 步 | |[ 包 建 vu 哮 本 | 


本 ;创建 测试 场景 阶段 主要 进行 测试 场景 的 设计 和 第 4 步 | [他 妈 测试 场 最 ] 
设置 ,包括 监控 指标 的 设 定 ;运行 测试 场景 阶段 主要 

对 已 创建 的 测试 场景 进行 执行 ,收集 相关 数据 ;分 析 第 5 沙 ] [运行 训 试 霹 ] 
结果 阶段 主要 进行 结果 的 分 析 和 报告 工作 。 第 6 步 分 析 结 果 | 


LoadRunner 的 性 能 测试 过 程 涵盖 了 性 能 测试 
工作 的 大 部 分 内 容 , 但 由 于 该 过 程 过 于 紧密 地 与 
LoadRunner 工具 继承 ,没有 兼顾 使 用 其 他 工具 或 用 户 自 行 设计 工具 的 需求 ,也 不 能 称 为 
一 个 普 适 性 的 测试 过 程 。 

另外 ,LoadRunner 提供 的 性 能 测试 过 程 并 未 对 计划 测试 阶段 .测试 设 计 阶 段 的 具体 
行为 .方法 和 目的 进行 详细 描述 ,因此 该 方法 最 多 只 能 被 称 为 “使 用 LoadRunner 进行 测 
试 的 过 程 ”, 而 不 是 一 个 适应 性 广泛 的 性 能 测试 过 程 。 


图 9-5 LoadRunner 的 性 能 测试 过 程 


9.4.5 Segue 提供 的 性 能 测试 过 程 


图 9-6 给 出 了 Segue 公司 Silk Performer 提供 的 性 能 测试 过 程 。 该 性 能 测试 过 程 和 
Performance Testing Lifecycle 一 致 ,是 一 个 不 断 try-check 的 过 程 。 

Silk Performance 提供 的 性 能 测试 过 程 从 确定 性 能 基线 开始 的 ,通过 单 用 户 对 应 用 
的 访问 获取 性 能 取 值 的 基线 ,然后 设 定 可 接受 的 性 能 目标 ,用 不 同 的 并 发 用 户 数 等 重复 进 
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评估 需求 


开发 测试 


重新 设置 指标 


< Se 


用 户 接受 度 记 录 指标 满足 


二 » 


图 9-6 ”Segue 提供 的 性 能 测试 过 程 


行 测 试 。 该 性 能 测试 方法 非常 适合 性 能 调 优 和 优化 ,通过 不 断 重复 的 try-check 过 程 ,可 
以 逐一 找到 可 能 导致 性 能 瓶颈 的 地 方 并 对 其 进行 优化 。 

但 Segue 提供 的 性 能 测试 过 程 的 模型 存在 与 LoadRunner 的 性 能 测试 过 程 同 样 的 问 
题 , 就 是 过 于 依赖 工具 自身 ,另外 ,该 过 程 模型 缺乏 对 计划 .设计 阶段 的 明确 划分 ,也 没有 
给 出 具体 的 活动 和 目标 。 


9.4.6 敏捷 性 能 测试 


敏捷 性 能 测试 是 随 着 敏捷 技术 的 发 展 而 出 现 的 一 种 新 的 性 能 测试 方法 。 敏 捷 开 发 方 
法 将 开发 定义 为 短 时 间 段 内 的 迭代 ,在 每 个 迭代 周期 中 定义 迭代 目标 ,通过 轻 量 级 的 管理 
方式 管理 迭代 目标 的 完成 。 敏 捷 开 发 方法 在 许多 项 目 和 组 织 中 得 到 了 广泛 的 应 用 ,为 这 
些 项 目 和 组 织带 来 了 巨大 的 收益 ,如 Google、Yahoo 等 大 型 互联 网 都 是 敏捷 开发 的 忠实 
用 户 。 

总 的 来 说 ,敏捷 性 能 测试 包括 一 些 特点 : 

(1) 在 每 个 迭代 目标 中 包含 明确 的 性 能 目标 ; 

(2) 建立 不 同 层次 的 性 能 测试 ; 

(3) 完全 或 接近 完全 自动 化 的 性 能 测试 ; 

(4) 使 用 测试 驱动 的 方法 保证 性 能 与 优化 性 能 。 
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9.5 性 能 测试 过 程 中 的 常见 风险 
9.5.1 识别 风险 


在 进行 性 能 测试 的 过 程 中 ,也 存在 一 定 的 风险 ,可 能 造成 最 终 性 能 测试 不 能 达到 预期 
的 效果 ,主要 风险 如 下 : 

(1) 测试 环境 的 差异 ; 

(2) 测试 数据 的 不 完善 ; 

(3) 测试 需求 的 不 完善 ; 

(4) 领导 对 测试 重要 性 的 意识 ; 

(5) 测试 人 员 的 素质 。 


9.5.2 规避 风险 


既然 在 软件 性 能 测试 的 过 程 中 会 存在 上 述 风险 , 那 在 实践 过 程 中 就 要 尽量 去 规避 它 ， 
减少 由 这 些 风险 带 来 的 损失 。 下 面 从 两 个 案例 讲解 如 何 规避 风险 : 

案例 一 ”规避 测试 环境 与 真实 环境 的 差异 带 来 的 风险 为 例 , 可 以 从 以 下 几 个 方面 
着 手 : 

(1) 环境 对 比 , 判 别 差异 性 ; 

(2) 识别 应 用 的 类 型 ; 

(3) 测试 环境 搭建 的 针对 性 ; 

(4) 测试 模型 的 建立 。 

案例 二 ”规避 测试 数据 不 完善 带 来 的 风险 ,可 以 从 以 下 几 个 方面 着 手 : 

(1) 分 析 测 试 数据 的 差异 性 ; 

(2) 预 估 生产 环境 一 年 内 的 增长 比例 ; 

(3) 测试 基础 数据 的 创建 。 


9.6 ”本章 小 结 


本 章 介绍 了 软件 性 能 测试 的 基本 概念 ,给 出 了 软件 性 能 的 定义 ,并 从 三 个 角度 介绍 了 
软件 性 能 的 具体 体现 。 此 外 ,还 对 软件 性 能 的 常见 术语 进行 了 介绍 ,并 详细 探讨 了 其 定 
义 。 其 次 ,本 章 还 列 出 了 目前 主流 的 软件 性 能 测试 方法 。 最 后 ,简要 介绍 了 在 软件 性 能 测 
试 中 存在 的 风险 以 及 规避 风险 的 方法 。 


第 10 章 ”性 能 测试 的 应 用 领域 


本 章 将 引入 一 个 “性 能 测试 的 应 用 领域 ”的 概念 ,通过 该 概念 将 性 能 测试 应 用 的 不 同 
场合 划分 为 5 种 不 同 的 性 能 测试 应 用 领域 ,然后 结合 在 2. 1 节 对 各 种 性 能 测试 方法 的 讨 
论 ,给 出 一 些 在 不 同 的 性 能 测试 应 用 领域 内 进行 性 能 测试 时 采用 的 方法 的 建议 。 

本 书 中 采用 的 是 一 种 大 范围 的 性 能 测试 的 概念 ,根据 这 个 概念 的 界定 ,性 能 测试 包括 
以 下 方法 : 验收 性 能 测试 .负载 测试 .压力 测试 .配置 测试 .并 发 测试 .可 靠 性 测试 。 


10.1 性 能 测试 的 方法 分 类 


性 能 测试 的 方法 比较 多 ,负载 测试 和 压力 测试 是 比较 常见 的 类 型 。 此 外 ,并 发 测试 等 
也 会 在 性 能 测试 中 进行 讨论 。 


10.1.1 验收 性 能 测试 


验收 性 能 测试 (Acceptance Performance Testing) 方 法 通过 模拟 生产 运行 的 业务 压力 
量 和 使 用 场景 结合 ,测试 系统 的 性 能 时 能 满足 生产 性 能 要 求 。 这 是 一 种 最 常见 的 方法 , 通 
俗 地 说 ,这 种 测试 方法 就 是 要 在 特定 的 运行 条 件 下 验证 系统 的 能 力 情况 。 

验收 性 能 测试 具有 以 下 特点 : 

(1) 这 种 方法 的 主要 目的 是 验证 是 否 具有 系统 宣称 具有 的 能 力 。 验 收 性 能 测试 方法 
包括 确定 用 户 场 景 、 给 出 需要 关注 的 性 能 指标 ,测试 执行 ,测试 分 析 几 个 步 又 ,这 是 一 种 完 
全 确定 了 系统 运行 环境 和 测试 行为 的 测试 方法 ,其 目的 只 能 是 依据 事先 的 性 能 规划 ,验证 
系统 是 否 达到 其 宣称 具有 的 能 力 。 

(2) 这 种 方法 需要 事先 了 解 被 测试 系统 的 典型 场景 ,并 具有 确定 的 性 能 目标 。 验 证 
性 能 测试 需要 首先 了 解 被 测 系统 的 典型 场景 ,所 谓 典 型 场景 ,是 指 具 有 代表 性 的 用 户 业 务 
操作 ,一 个 典型 场景 包括 操作 序列 和 并 发 用 户 数量 条 件 。 其 次 ,这 种 方法 需要 有 确定 的 性 
能 目标 ,性 能 目标 的 描述 方式 一 般 为 : 要 求 系统 在 100 个 并 发 用 户 的 并 发 条 件 下 进行 A 
业务 操作 ,响应 时 间 不 超过 5s。 

(3) 这 种 方法 要 求 在 已 确定 的 环境 下 运行 。 

验收 性 能 测试 方法 的 运行 环境 必须 是 确定 的 。 软 件 系 统 的 性 能 表现 与 很 多 因素 相 
关 , 无 法 根据 系统 在 一 个 环境 上 的 表现 去 推断 其 在 另 一 个 不 同 环境 中 的 表现 ,因此 对 这 种 
验证 性 的 测试 ,必须 要 求 测试 时 的 环境 都 已 确定 。 
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10.1.2 负载 测试 


负载 测试 (Load Testing) 方 法 在 被 测 系 统 上 不 断 增 加 压力 ,直到 性 能 指标 (如 响应 时 
间 ) 超 过 预定 指标 或 者 某 种 资源 使 用 已 经 达到 饱和 状态 。 

负载 测试 方法 可 以 找到 系统 的 处 理 极限 ,为 系统 调 优 提供 数据 ,有 时 也 被 称 为 可 置 性 
测试 (Scalability Testing) 。 该 方法 具有 以 下 特点 : 

(1) 这 种 性 能 测试 方法 的 主要 目的 是 找到 系统 处 理 能 力 的 极限 。 

(2) 负载 测试 方法 通过 “检测 一 加 压 一 性 能 指标 超过 预期 "的 手段 ,找到 系统 处 理 能 
力 的 极限 ,该 极限 一 般 会 用 “在 给 定 条 件 下 最 多 120 个 并 发 用 户 访问 ”这 样 的 描述 来 体现 。 

(3) 这 种 性 能 测试 方法 需要 在 给 定 的 测试 环境 下 进行 ,通常 也 需要 考虑 被 测 系统 的 
业务 压力 量 和 典型 场景 ,使 得 测试 结果 具有 业务 上 的 意义 。 负 载 测试 方法 由 于 涉及 预定 
的 性 能 指标 等 需要 进行 比较 的 数据 ,也 必须 在 给 定 的 测试 环境 下 进行 。 另 外 , Load 
Testing 方法 在 “加 压 ” 的 时 候 , 必 须 选择 典型 的 场景 ,在 增加 压力 时 保证 这 种 压力 具有 业 
务 上 的 意义 。 

(4) 这 种 性 能 测试 方法 一 般 用 来 了 解 系统 的 性 能 容量 ,或 是 配合 性 能 调 优 来 使 用 。 


10.1.3 压力 测试 


压力 测试 (Stress Testing) 方 法 测试 系统 在 一 定 的 饱和 状态 下 ,例如 CPU .内存 等 在 
饱和 使 用 的 情况 下 ,系统 能 够 处 理 的 会 话 能 力 , 以 及 系统 是 否 会 出 现 错误 。 

压力 测试 方法 具有 以 下 特点 : 

(1) 这 种 性 能 测试 方法 的 目的 是 检查 系统 处 于 压力 情况 下 时 的 应 用 测 性 能 表现 。 压 
力 测 试 方法 通过 增加 访问 压力 ,使 应 用 系统 的 资源 保持 在 一 定 的 水 平 ,这 种 测试 方法 的 主 
要 目的 是 检验 此 时 的 应 用 表现 ,重点 在 于 有 无 出 错 信息 产生 、 系 统 对 应 用 的 响应 等 。 

(2) 这 种 性 能 测试 一 般 通 过 模拟 负载 等 方法 ,使 得 系统 的 资源 达到 较 高 的 水 平 。 

一 般 情况 下 ,会 把 压力 设 定 为 “CPU 使 用 率 达 到 75% 以 上 、 内 存 使 用 率 达 到 70% 以 
上 ”这 样 的 描述 ,在 这 种 情况 下 测试 系统 响应 时 间 、 系 统 有 无 产生 错误 。 除 了 CPU 和 内 
存 使 用 率 的 设 定 外 ,JVM 的 可 用 内 存 、 数 据 库 的 连接 数 、 数 据 库 服 务 器 CPU 利用 率 等 都 
可 以 作为 压力 的 依据 。 

(3) 这 种 性 能 测试 方法 一 般 用 于 测试 系统 的 稳定 性 。 

用 压力 测试 的 方法 考察 系统 的 稳定 性 是 出 于 这 样 的 考虑 : 如 果 一 个 系统 能 够 在 压力 
环境 下 稳定 运行 一 段 时 间 , 那 么 这 个 系统 在 通常 的 运行 条 件 下 应 该 可 以 达到 令 人 满意 的 
程度 ?在 压力 测试 中 ,会 考虑 系统 在 压力 下 是 否 会 出 现 错误 ,测试 中 是 否 有 内 存 的 泄露 等 
问题 。 
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10.1.4 配置 测试 


配置 测试 (Configuration Testing) 方 法 通过 对 被 测 系统 软 硬 件 环境 的 调整 ,了 解 各 种 
不 同 环境 对 系统 性 能 影响 的 程度 ,从 而 找到 系统 各 项 资源 的 最 优 分 配 原则 。 

配置 测试 具有 以 下 特点 : 

(1) 配置 测试 性 能 测试 方法 的 主要 目的 是 了 解 各 种 不 同 因素 对 系统 性 能 的 影响 程 
度 , 从 而 判断 出 最 值得 进行 的 调 优 操作 。 

(2) 此 配置 测试 方法 不 同 于 与 功能 测试 并 列 的 那个 “配置 测试 ”方法 。 对 整个 系统 来 
说 ,配置 测试 是 针对 软件 而 言 的 ,其 主要 目的 是 验证 软件 能 否 在 不 同 的 软 硬 件 中 正常 运 
行 ,是 功能 上 的 验证 。 而 这 里 提 到 的 配置 测试 方法 ,是 在 性 能 测试 领域 内 的 配置 测试 方 
法 ,其 主要 目的 是 了 解 各 种 因素 对 系统 性 能 的 影响 程序 ,从 而 判断 出 对 性 能 影响 最 大 的 
因素 。 

(3) 这 种 性 能 测试 方法 一 般 在 对 系统 性 能 状况 有 初步 的 了 解 后 进行 。 

配置 测试 方法 需要 在 确定 的 环境 、 操 作 步 骤 和 压力 条 件 下 进行 。 该 方法 在 每 次 执行 
测试 时 更 换 、 扩 充 硬 件 设备 ,调整 网 络 环境 ,调整 应 用 服务 器 和 数据 库 服 务 器 的 参数 设置 ， 
比较 每 次 的 测试 结果 ,从 而 确定 各 个 因素 对 系统 性 能 的 影响 , 找 出 影响 最 大 的 因素 。 

(4) 这 种 性 能 测试 方法 一 般 用 于 测试 用 户 性 能 调 优 和 规划 能 力 。 

配置 测试 方法 主要 用 于 性 能 调 优 领域 ,可 以 实现 调 优 的 持续 进行 。 另 外 ,在 规划 能 力 
领域 内 ,该 方法 也 常 被 用 来 评估 该 如 何 调整 才能 实现 系统 的 扩展 性 。 


10.1.5 可 靠 性 测试 


可 靠 性 测试 (Reliability Testing) 方 法 通过 给 系统 加 载 一 定 的 业务 压力 ,让 系统 持续 
运行 一 段 时 间 ,测试 系统 在 这 种 条 件 下 是 否 能 稳定 运行 。 

可 靠 性 测试 方法 具有 以 下 特点 : 

(1) 这 种 性 能 测试 方法 的 主要 目的 是 验证 系统 是 否 支持 长 期 稳定 地 运行 。 

这 种 性 能 测试 方法 的 主要 目的 是 验证 系统 是 否 支 持 长 期 稳定 地 运行 ,其 原理 已 在 前 
面 用 非常 粗糙 的 方式 进行 了 解释 。 从 直观 上 讲 ,在 较 大 的 压力 下 进行 一 个 较 长 时 间 的 测 
试 , 如 果 系 统 在 测试 中 不 出 现 问 题 或 是 不 好 的 征兆 ,基本 上 可 以 说 明 系统 具备 长 期 稳定 运 
行 的 条 件 。 

(2) 这 种 性 能 测试 方法 需要 在 压力 下 持续 一 段 时 间 运 行 。 

既然 是 稳定 性 测试 ,至 少 需 要 让 系统 在 压力 下 运行 一 段 时 间 。 这 段 时 间 的 具体 数值 
需要 根据 系统 的 稳定 性 要 求 确定 。 

(3) 测试 过 程 中 需要 关注 系统 的 运行 情况 

在 运行 的 过 程 中 ,一 般 需要 关注 系统 的 内 存 使 用 情况 、 系 统 的 其 他 资源 使 用 以 及 系统 
响应 时 间 有 无 明显 的 变化 。 如 果 在 测试 过 程 中 发 现 , 随 着 时 间 的 推移 ,响应 时 间 有 明显 的 
变化 ,或 是 系统 资源 使 用 率 有 明显 的 波动 ,都 可 能 是 系统 不 稳定 的 征兆 。 
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10.1.6 负载 压力 测试 


(1) 并 发 性 能 测试 。 

并 发 性 能 测试 (Concurrency Testing) 方 法 通过 模拟 用 户 的 并 发 访问 目测 多 用 户 并 发 
访问 同一 个 应 用 、 同 一 个 模块 或 者 数据 记录 时 是 否 存在 死 锁 或 者 其 他 性 能 问题 。 

并 发 性 能 测试 具有 以 下 特点 : 

@ 这 种 性 能 测试 方法 的 主要 目的 是 发 现 系统 中 可 能 隐藏 的 并 发 访问 时 的 问题 。 

@ 这 种 性 能 测试 方法 主要 关注 系统 可 能 存在 的 并 发 问题 ,例如 系统 中 的 内 存 泄露 、 
线程 锁 和 资源 争 用 问题 。 

@ 这 种 性 能 测试 方法 可 以 在 开发 的 各 个 阶段 使 用 ,需要 相关 测试 工具 的 配合 和 
支持 。 

(2) 疲劳 强度 测试 。 

通常 采用 系统 稳定 运行 情况 下 能 够 支持 的 最 大 并 发 用 户 数 或 者 日 常 运行 用 户 数 , 持 
续 执 行 一 段 时 间 业 务 ,通过 综合 分 析 交易 执行 指标 和 资源 监控 指标 来 确定 系统 处 理 最 大 
工作 量 强度 性 能 的 过 程 。 疲 劳 强 度 测试 案例 制定 的 原则 是 保证 系统 长 期 不 间断 运行 的 业 
务 量 , 并 且 应 该 尽量 去 满足 该 条 件 。 

(3) 大 数据 量 测试 。 

@ 独立 的 数据 量 测试 。 针 对 某 些 系统 存储 ,传输 ,统计 ,查询 等 业务 进行 大 数据 量 测试 。 

@ 综合 数据 量 测 试 和 压力 性 能 测试 .负载 性 能 测试 .并 发 性 能 测试 ,疲劳 性 能 测试 相 
结合 的 综合 测试 方案 。 


10.2 性 能 测试 应 用 领域 分 析 


在 前 面 已 经 提 到 了 “性 能 测试 领域 ”的 概念 ,并 给 出 了 多 种 不 同性 能 测试 方法 的 说 明 
和 解释 。 本 节 将 详细 说 明 5 种 不 同 的 性 能 测试 应 用 领域 ,并 将 各 种 不 同 的 性 能 测试 方法 
与 应 用 领域 进行 对 应 。 

概括 说 来 ,可 以 将 性 能 测试 的 应 用 领域 分 为 5 个 不 同 领 域 : 

(1) 能 力 验 证 ; 

(2) 规划 能 力 ; 

(3) 性 能 调 优 ; 

(4) 缺陷 发 现 ; 

(5) 性 能 基准 比较 。 


10.2.1 能 力 验 证 


能 力 验 证 是 性 能 测试 最 常用 的 一 个 领域 。 一 般 能 力 验证 采用 这 样 的 描述 方式 : 某 系 
统 能 否 在 条 件 A 下 具备 B 技 能 ,重点 在 于 验证 系统 是 否 具 有 某 种 能 力 。 
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能 力 验证 具有 以 下 几 个 特点 : 
(1) 要 求 在 一 个 已 确定 的 环境 下 运行 ; 
(2) 需要 根据 典型 场景 来 设置 测试 方案 与 测试 用 例 。 


10.2.2 规划 能 力 


规划 能 力 与 能 力 验 证 有 相似 之 处 ,但 还 是 存在 一 些 不 同 的 地 方 , 能 力 验 证 强调 的 是 在 
某 个 条 件 下 具备 什么 样 的 能 力 ,而 规划 能 力 体现 系统 如 何 才能 达到 要 求 的 性 能 指标 。 规 
划 能 力 问题 常常 会 这 样 描述 : 系统 如 何 才 能 支持 未 来 用 户 增长 的 需要 ,这 里 强调 的 是 未 
来 能 力 增长 的 一 个 需求 ,着 眼 于 未 来 系统 的 规划 。 

规划 能 力 领 域 的 特点 是 : 

(1) 对 系统 能 力 的 一 种 探索 性 的 测试 ; 

(2) 可 以 了 解 系统 的 性 能 及 系统 性 能 的 可 扩展 性 。 


10.2.3 性 能 调 优 


性 能 调 优 通 过 测试 来 调整 系统 环境 ,最 终 使 系统 能 达到 最 优 状态 。 这 是 一 个 持续 调 
优 的 过 程 ,主要 的 调 优 对 象 有 数据 参数 、 应 用 服务 器 、 系 统 的 硬件 资源 等 。 

一 个 标准 性 能 调 优 的 步骤 如 下 : 

(1) 确定 本 次 性 能 测试 的 基准 环境 .基准 负 载 和 基准 性 能 指标 ,目的 是 将 这 些 基 准 作 
为 后 期 测试 数据 的 参考 对 象 。 

(2) 对 系统 进行 调 优 ,再 调整 系统 运行 环境 和 测试 方案 重复 进行 性 能 测试 ,并 记录 测 

(3) 将 调整 后 的 测试 结果 与 基准 数据 进行 比较 ,以 确定 调 优 的 效果 ,重复 执行 步骤 
(2) ,直到 性 能 指标 满足 要 求 。 


10.2.4 缺陷 发 现 

性 能 测试 应 用 领域 的 主要 目标 是 通过 性 能 测试 的 手段 来 发 现 系统 存在 的 缺陷 。 很 多 
系统 在 实验 室 中 没有 任何 问题 ,可 是 当 交 付 用 户 时 就 出 现 了 莫名 其 妙 的 错误 。 如 果 交 付 
给 客户 后 发 现 多 人 同时 访问 速度 缓慢 或 宕 机 的 现象 .那么 很 可 能 是 由 于 系统 性 能 问题 所 
引起 的 。 
10.2.5 性 能 基准 比较 


性 能 基准 比较 ,顾名思义 ,就 是 在 不 设 定 明确 性 能 目标 的 情况 下 ,通过 比较 得 到 每 次 
和 迭代 中 的 性 能 表现 的 变化 ,根据 这 些 变化 决定 迭代 是 否 达到 了 预期 的 目标 。 
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10.3 ”本章 小 结 


本 章 主要 介绍 软件 性 能 测试 方法 的 常用 分 类 ,着 重 介绍 了 验收 性 能 测试 、 负 载 测试 、 
压力 测试 .配置 测试 .并 发 测试 .可 靠 性 测试 方法 及 其 各 自 的 特点 。 最 后 本 章 从 软件 的 开 
发 .测试 和 维护 阶段 可 能 遇 到 的 实际 问题 开始 ,进入 了 * 性 能 测试 应 用 领域 "的 概念 。 本 章 
的 “性 能 测试 应 用 领域 "描述 将 性 能 测试 的 应 用 场景 划分 为 5 个 不 同 的 领域 : 能 力 验证 、 
规划 能 力 ,性 能 调 优 、 发 现 缺陷 以 及 性 能 基准 比较 。 
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由 于 软件 性 能 测试 与 软件 功能 测试 有 着 显著 的 不 同 , 也 由 于 其 自身 的 重要 性 和 复杂 
性 ,软件 性 能 测试 本 身 具 有 自己 的 测试 过 程 模型 。 相 应 地 ,如 何 组 建 一 个 高 效 的 性 能 测试 
团队 成 为 有 效 进 行 性 能 测试 的 关键 。 

从 管理 和 组 织 的 角度 来 说 ,对 软件 性 能 测试 可 以 采用 项 目 管理 的 一 般 方法 和 技术 来 
进行 管理 和 组 织 。 但 在 具体 的 技术 层面 上 ,软件 性 能 测试 还 是 必须 要 采用 对 应 的 软件 测 
试 工具 ,同时 也 必须 服务 于 软件 测试 这 个 目标 。 因 此 ,可 以 一 般 的 软件 测试 模型 和 项 目 管 
理 过 程 为 基础 ,在 其 中 增加 部 分 自动 化 测试 与 敏捷 开发 的 模型 ,以 形成 适合 于 软件 性 能 测 
试 需要 的 测试 模型 。 

本 章 主要 介绍 性 能 测试 团队 中 人 员 的 构成 和 一 些 性 能 测试 的 过 程 模 型 。 


11.1 性 能 测试 人 员 构 成 


软件 性 能 测试 正 逐 渐 成 为 软件 质量 保障 的 一 个 重要 组 成 部 分 。 而 一 支 合 格 的 性 能 测 
试 队 伍 , 对 于 软件 性 能 测试 的 顺利 展开 又 有 着 极为 重要 的 意义 。 

在 一 个 性 能 测试 团队 中 应 该 包括 这 样 一 些 角 色 

(1) 项 目测 试 经 理 角 色 。 

项 目测 试 经 理 角色 负责 整个 测试 项 目 , 对 项 目的 进度 负责 ,其 具体 的 职责 包括 确定 测 
试 目 标 、 制 订 测 试 计划 、 监 控 计 划 执 行 、 处 理 测试 项 目 干 系 人 的 交互 等 。 项 目测 试 经 理 必 
须 具有 项 目 经 理 的 基本 技能 ,能 掌握 项 目的 进行 。 

(2) 测试 设计 角色 。 

测试 设计 角色 测试 方案 和 用 例 ,该 角色 应 该 具有 较 强 的 业务 能 力 ,能 够 根据 用 户 需求 
和 软件 需求 ,从 业务 的 角度 分 析 和 整理 典型 场景 ,识别 出 性 能 需求 .并 能 制订 合理 可 行 的 
测试 方案 和 用 例 。 

(3) 测试 开发 角色 。 

测试 开发 角色 负责 实现 测试 设计 人 员 设 计 的 方案 和 用 例 , 负 责 测试 脚本 的 编写 和 维 
护 ,确定 测试 过 程 中 需要 监控 的 性 能 指标 。 

(4) 测试 执行 角色 。 

测试 执行 角色 按照 测试 方案 和 用 例 , 用 测试 工具 组 织 和 执行 相应 的 脚本 ,监控 相关 的 
性 能 指标 ,记录 测试 结果 。 

(5) 测试 分 析 角 色 。 

测试 分 析 角色 需要 获得 测试 执行 人 员 的 测试 执行 结果 ,对 照 测 试 目标 分 析 测 试 数据 
和 测试 过 程 中 获取 的 性 能 指标 ,得 出 测试 结论 。 根 据 不 同 的 测试 目标 ,测试 分 析 得 出 的 结 
论 会 侧重 不 同 的 方面 。 


(6) 支持 角色 。 

支持 角色 包括 系统 工程 师 、 网 络 工程 师 、 数 据 库 工程 师 。 系 统 工程 师 主要 处 理性 能 测 
试 过 程 中 与 环境 相关 的 内 容 , 为 测试 过 程 提供 支持 ;网 络 工程 师 则 保证 测试 环境 中 的 网 络 
环境 ,同样 ,网 络 工程 师 也 会 为 测试 结果 分 析 提 供 支 持 ;数据 库 工程 师 则 保证 测试 环境 中 
数据 库 环境 的 相关 内 容 , 并 能 为 测试 分 析 人 员 提 供 结果 分 析 上 的 支持 。 

表 11-1 给 出 了 个 角色 的 技能 和 职责 描述 。 


表 11-1 性 能 测试 团队 角色 的 技能 和 职责 描述 
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角 色 职责 技 能 
CD 和 用 户 等 项 目 干系 人 交互 ,确保 测试 
的 外 部 环境 GD 计划 执行 和 监控 能 力 
测试 经 理 @ 制订 测试 计划 @ 风险 意识 和 能 力 
@ 监控 测试 进度 @ 外 交 能 力 和 灵活 变通 的 能 力 
@ 发 现 和 处 理 测试 中 的 风险 
加 定义 性 能 规划 
加 GD 业务 把 握 能 力 
测试 设计 @ 识别 用 户 的 性 能 需求 
ed @ 性 能 需求 分 析 和 识别 能 力 
GD 实现 已 设计 的 性 能 场景 
@ 脚本 开发 .调试 CD 脚本 编码 和 调试 能 力 
@ 确定 测试 时 需要 监控 的 性 能 指标 ,性 | @ 理解 性 能 指标 和 性 能 计数 器 
能 计数 器 
GD 部 署 测试 环境 GD 措 建 测试 环境 的 能 力 
六 @ 执行 脚本 和 场景 @ 测试 工具 使 用 (执行 ) 的 能 力 
@ 根据 监控 要 求 记录 测试 结果 .记录 性 | @ 性 能 指标 和 性 能 计数 器 值 获取 和 
能 指标 和 性 能 计数 器 什 记录 的 能 力 
OD 根据 测试 结果 、 性 能 指标 的 数值 ,性 | 了 掌握 性 能 测试 工具 的 使 用 方法 
: 1 @ 掌握 应 用 系统 性 能 领域 的 相关 知 
测试 分 析 人 人 人 识 ,理解 所 采用 的 架构 
旬 能 根据 性 能 规划 ,分 析出 系统 性 能 眶 | @ 如 汪 镍 所 采 用 的 架构 
颈 ,或 是 给 出 优化 建议 部 
@ 具有 一 定 的 编码 经 验 
刘 持 角色 (有 统 ) | 素 统 支 持 ,协助 解决 测试 工程 师 无 法 解 | 处 理 系统 问题 的 能 力 和 技能 ,最 好 册 
统 ) | 决 的 系统 问题 专职 的 系统 管理 员 担任 这 个 角色 
网 络 方面 的 支持 ,协助 测试 工程 师 解决 
支持 角色 (网 络 ) | 网 络 方面 的 问题 ,在 必要 时 为 测试 分 析 de i 
角色 提供 网 络 方面 的 分 析 支 持 
数据 库 方面 的 支持 ,在 必要 时 为 测试 分 | 数据 库 方面 的 能 力 和 技能 ,最 好 由 专 
支持 角色 数据库” | 析 角 色 提供 数据 库 方面 的 支持 职 的 DBA 担任 这 个 角色 
11. 2 ”性 能 测试 过 程 模型 


与 功能 测试 相 比 ,性 能 测试 具有 更 大 的 复杂 性 。 随 着 系统 的 日 趋 复杂 , 越 来 越 多 性 能 
测试 工具 的 引入 ,性 能 测试 单单 作为 系统 或 验收 测试 的 一 个 内 容 来 体现 ,已 经 不 能 满足 指 
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导 性 能 测试 的 需要 。 

国内 性 能 测试 专家 提出 了 一 种 对 性 能 测试 进行 管理 的 方法 ,该 方法 基于 自动 化 测试 
生命 周期 方法 (Automated Test Life-Cycle Methodology, ATLM) 和 被 广泛 采用 的 TMap 
模型 ,按照 ATLM 的 描述 方法 对 性 能 测试 过 程 进行 建 模 。 这 就 是 性 能 测试 过 程 通用 模型 
(Performance Testing General Model, PTGM). 

PTGM 模型 是 一 个 结构 化 的 过 程 模 型 ,将 性 能 测试 过 程 分 为 测试 前 期 准备 ,测试 工 
具 引 入 ,测试 计划 ,测试 设计 与 开发 ,测试 执行 和 管理 以 及 测试 分 析 6 个 步骤 ,其 测试 过 程 
模型 如 图 11-1 所 示 。 


4. 测试 设计 与 开发 3. 测试 计划 


莹 天 


性 能 测试 过 程 通用 模型 
(PTGM) 


1. 测试 前 期 准备 


图 11-1 PTGM 模型 示意 图 


此 或 震 六 江天 董 外 
并 已 下 


eT 


> 


考虑 到 性 能 测试 工作 中 自动 化 工具 的 引入 和 使 用 ,在 PTGM 模型 中 引入 了 一 个 明确 
的 “测试 工具 引入 ”阶段 ,用 以 处 理 和 测试 工具 引入 相关 的 过 程 : 由 于 性 能 测试 的 需求 获取 
与 分 析 、 测 试 团队 组 建 等 工作 与 功能 测试 存在 不 同 的 侧重 点 (性 能 测试 需求 并 不 像 功能 测 
试 那么 显而易见 ) ,因此 在 过 程 模型 中 增加 了 一 个 独立 的 “测试 前 期 准备 ”; 另 外 ,与 功能 测 
试 相 比 ,性 能 测试 的 测试 设计 和 开发 明显 会 有 区 别 , 因 此 将 “测试 设计 与 开发 ”阶段 作为 过 
程 中 的 一 个 重要 阶段 。 

PTGM 模型 的 各 个 阶段 都 包含 了 很 多 活动 ,下 面 是 PTGM 模型 的 详细 描述 。 


11.2.1 测试 前 期 准备 


在 前 期 准备 阶段 ,至 少 要 完成 两 个 方面 的 工作 : 保证 系统 稳定 和 建立 合适 的 测试 团 
队 。 人 性 能 测试 一 般 是 软件 系统 已 经 开发 或 是 部 署 完成 之 后 的 测试 ,要 求 测试 对 象 至 少 具 
有 一 定 的 稳定 性 ,在 功能 上 基本 满足 需求 。 对 一 个 很 不 稳定 或 还 处 于 “半成品 ”状态 的 软 
件 系统 进行 测试 ,没有 太 大 的 意义 。 

具体 来 说 ,测试 前 期 包含 以 下 的 活动 。 
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(1) 系统 基础 功能 验证 。 

该 活动 类 似 于 系统 测试 阶段 ,每 个 迭代 过 程 中 的 BVT(Build Verification Test) ,对 
性 能 测试 而 言 ,这 个 活动 的 主要 目的 是 确保 当前 需要 进行 性 能 测试 的 应 用 系统 已 经 具备 
了 进行 性 能 测试 的 条 件 。 

如 果 性 能 测试 本 身 属于 验收 测试 的 一 部 分 ,只 需要 把 性 能 测试 安排 在 功能 验收 测试 
完成 之 后 即 可 ;如 果 性 能 测试 不 在 验收 测试 阶段 进行 , 则 必须 保证 在 性 能 测试 之 前 进行 至 
少 一 次 系统 的 功能 覆盖 测试 。 

(2) 组 件 测试 团队 。 

该 活动 的 目标 是 建立 一 个 可 以 进行 性 能 测试 的 团队 。 人 性 能 测试 团队 的 角色 构成 在 前 
面 的 章节 已 经 进行 了 描述 ,在 测试 前 期 准备 阶段 ,需要 根据 项 目的 大 致 情况 ,确定 人 员 需 
要 的 技能 ,从 而 从 组 织 中 或 是 通过 招聘 挑选 合适 的 人 员 组 成 测试 组 。 

(3) 测试 工具 需求 确认 。 

该 活动 确定 测试 工具 应 该 具有 的 功能 特性 。 在 这 个 活动 中 ,需要 根据 对 被 测 系统 的 
了 解 和 对 测试 过 程 的 初步 规划 ,给 出 测试 工具 应 该 具备 的 功能 列表 ,可 参见 表 11-2。 


表 11-2 性 能 测试 工具 需求 规划 表 


被 测 系统 环境 测试 工具 功能 需求 建议 
测试 工具 是 否 能 运行 在 本 操作 系统 上 

操作 系统 环境 
测试 工具 是 否 支持 对 本 操作 系统 的 监控 

应 用 服务 器 环境 测试 工具 能 否 支持 对 本 应 用 服务 器 的 监控 

数据 库 环境 测试 工具 能 否 支 持 本 数据 库 的 监控 
本 系统 使 用 了 哪些 协议 

应 用 使 用 的 协议 哪些 协议 需要 在 性 能 测试 中 通过 工具 进行 录制 和 产生 负载 
测试 工具 能 否 支 持 需要 进行 录制 和 产生 负载 的 协议 
是 否 需 要 测试 工具 支持 防火 墙 

网 络 环境 
是 否 需 要 测试 工具 支持 负载 均衡 

测试 管理 支持 测试 工具 是 否 能 够 提供 方便 的 测试 结果 分 析 和 管理 


(4) 性 能 预备 测试 (可 选 活动 ) 。 

所 谓 预 备 测试 ,是 在 正式 的 测试 之 前 ,通过 简单 的 探索 性 测试 或 是 其 他 方法 ,对 系统 
的 性 能 表现 进行 初步 的 了 解 。 因 为 这 种 预备 测试 是 非 正式 性 的 ,仅仅 用 来 对 被 测 系统 的 
性 能 建立 一 个 初步 印象 ,所 以 方法 上 也 比较 随意 ,用 人 工 操 作 和 秒表 随机 抽查 部 分 操作 的 
性 能 表现 即 可 。 


11.2.2 测试 工具 引入 


人 性 能 测试 工具 在 性 能 测试 项 目 中 发 挥 着 不 可 替代 的 作用 ,很 难 想象 一 个 没有 使 用 任 
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何 性 能 测试 工具 而 完全 依靠 手工 进行 的 性 能 测试 。 对 性 能 测试 来 说 ,为 项 目测 试 选择 合 
适 的 工具 ,确定 测试 工具 的 适用 范围 ,规定 和 规范 测试 工具 的 使 用 ,都 不 是 一 件 容 易 的 事 
情 。 因 此 把 “测试 工具 引入 ”作为 一 个 单独 的 阶段 。 

测试 工具 引入 阶段 包括 下 列 活动 。 

(1) 工具 选择 。 

性 能 测试 一 定 会 使 用 自动 化 测试 手段 ,使 用 自动 测试 工具 (商业 的 或 是 自行 开发 的 ) 。 
本 活动 用 于 为 项 目 选择 合适 的 工具 。 

选择 的 方法 是 圈定 集中 可 用 的 工具 ,对 照 表 3-2 给 出 的 问题 列表 ,为 每 个 工具 进行 一 
个 功能 符合 度 的 评估 ,选择 符合 度 最 高 的 工具 。 如 果 所 有 的 工具 都 无 法 达到 所 要 求 的 功 
能 符合 度 , 则 可 以 考虑 通过 创建 方式 自行 构建 测试 中 使 用 的 工具 。 

(2) 工具 应 用 技能 培训 。 

该 活动 为 项 目 组 的 相关 参与 者 进行 测试 工具 的 应 用 技能 培训 ,以 使 测试 活动 参与 者 
能 够 具备 测试 需要 的 技能 。 根 据 在 3. 2. 1 节 给 出 的 角色 和 职能 ,与 测试 工具 相关 性 最 大 
的 是 “测试 开发 ”“ 测 试 执行 "和 “测试 分 析 ” 角 色 , 因 此 培训 的 重点 是 针对 这 三 种 类 型 的 角 
色 进 行 。 

该 活动 需要 达到 一 定 的 目标 ,最 好 能 够 在 活动 开始 前 确定 各 种 角色 人 员 的 详细 技能 
标准 ,并 据 此 给 出 培训 是 否 达 到 预定 目标 的 评判 准则 。 培 训 活 动 不 一 定 需要 组 织 内 部 的 
人 员 执 行 完成 ,可 以 通过 工具 的 经 销 商 培训 或 是 外 包 服 务 等 方式 完成 。 

(3) 确定 工具 应 用 过 程 。 

除了 工具 的 应 用 技能 培训 外 ,测试 工具 引入 过 程 中 的 另 一 个 重要 活动 是 确定 工具 的 
应 用 过 程 。 

测试 工具 引入 过 程 中 最 容易 导致 的 失败 就 是 团队 不 能 达成 对 测试 工具 应 用 范围 的 一 
致 认可 和 测试 工具 应 用 局 限 性 的 一 致 确认 。 由 于 工具 经 销 商 常用 的 夸大 和 模糊 宣传 手 
段 ,测试 工具 常常 会 给 不 了 解 的 人 带 来 一 种 “工具 无 所 不 能 ”的 印象 。 如 果 不 能 达成 这 种 
一 致 的 认识 ,很 容易 因 测 试 工具 应 用 的 范围 发 生 和 争执 甚至 是 推 旋 。 

该 活动 需要 确定 性 能 测试 工具 在 测试 中 的 具体 应 用 范围 ,工具 使 用 过 程 中 的 问题 解 
决 方法 等 内 容 。 具 体 来 说 ,哪些 工作 使 用 工具 完成 ? 测试 工具 在 使 用 过 程 中 的 问题 由 谁 
来 解决 ? 测试 工具 的 脚本 如 何 管理 ?这些 问 题 都 应 该 在 这 个 活动 中 完成 。 


11.2.3 测试 计划 


测试 计划 阶段 用 于 生成 指导 整个 测试 执行 的 计划 。 该 阶段 主要 完成 测试 目标 的 确 
定 、` 测 试 时 间 的 拟定 。 建 议 这 个 阶段 的 工作 分 解 为 以 下 活动 。 

(1) 性 能 测试 领域 分 析 。 

在 性 能 测试 中 引入 领域 的 概念 可 以 反映 性 能 测试 的 直接 目的 。 性 能 测试 的 应 用 领域 
分 为 “能 力 验 证 ”“ 规 划 能 力 ”“ 性 能 调 优 ”和 “发 现 缺 陷 ”4 个 领域 ,在 性 能 测试 计划 阶段 ， 
首先 要 执行 的 活动 是 根据 希望 本 次 性 能 测试 达到 的 目的 ,分 析出 性 能 测试 的 应 用 领域 。 

测试 的 目的 是 明确 验证 系统 在 固定 条 件 下 的 性 能 能 力 , 属 于 “能 力 验证 ”领域 ,该 领域 
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常见 于 对 特定 环境 上 部 署 系统 的 性 能 验证 测试 ;测试 的 目的 是 了 解 系统 性 能 能 力 的 可 扩 
展 性 和 系统 在 非特 定 环境 下 的 性 能 能 力 , 属 于 “规划 能 力 ” 领 域 .该 领域 常见 于 对 应 用 性 能 
可 扩展 性 的 测试 ;测试 的 目的 是 通过 测试 (发 现 问题 ) 一 调 优 (调整 ) 一 测试 (验证 调 优 效 
果 ) 的 方法 提高 系统 性 能 能 力 , 属 于 “性 能 调 优 ”领域 ;测试 的 目的 是 通过 性 能 测试 手段 ,发 
现 应 用 的 缺陷 ,属于 “发 现 缺 陷 ” 领 域 。 

确定 了 性 能 测试 的 应 用 领域 之 后 ,可 以 据 此 给 出 性 能 测试 的 目标 ,并 可 以 初步 确定 可 
用 的 性 能 测试 方法 。 

根据 不 同 的 性 能 测试 应 用 领域 分 析 结 果 , 性 能 测试 的 目标 定义 会 有 所 不 同 。“ 性 能 测 
试 目标 ”与 “性 能 目标 不同 。 性 能 测试 目标 描述 的 是 性 能 测试 需要 达成 的 目标 ,而 性 能 目 
标 描 述 的 是 性 能 测试 过 程 中 ,用 于 判断 性 能 测试 是 否 通过 的 标准 。 

表 11-3 给 出 了 各 种 不 同 应 用 领域 的 性 能 测试 的 性 能 测试 目标 和 人 性 能 目标 。 


表 11-3 不 同 应 用 领域 的 性 能 测试 目标 和 性 能 目标 


应 用 领域 性 能 测试 目标 性 能 目标 

能 力 验证 | 验证 系统 在 给 定 环境 中 的 性 能 能 力 重点 关注 的 关键 业务 响应 时 间 、 知 此 量 
验证 系统 的 性 能 扩展 能 力 , 找 出 系统 能 力 扩充 

规划 能 力 | 的 关键 点 ,给 出 改善 其 性 能 扩展 能 力 的 建议 。 | 业务 的 性 能 瓶颈 

性 能 调 优 | 提高 系统 的 性 能 表现 重点 关注 的 关键 业务 响应 时 间 , 香 吐 量 

发 现 缺陷 | 发 现 系统 中 的 缺 了 无 


(2) 用 户 活动 剖析 与 业务 建 模 。 

用 户 活 动 剖析 与 业务 建 模 活动 用 来 寻找 用 户 的 关键 性 能 关注 点 。 用 户 对 系统 性 能 的 
关注 往往 集中 在 少数 几 个 业务 活动 上 ,在 确定 性 能 目标 之 前 ,需要 先 把 用 户 的 这 些 关 注 点 
找 出 来 ,从 而 确定 最 贴近 用 户 要 求 的 性 能 目标 。 

用 户 活动 前 析 的 方法 大 体 分 为 两 种 : 系统 日 志 分 析 和 用 户 调查 分 析 。 系 统 日 志 分 析 
是 指 通过 应 用 系统 的 日 志 了 解 用 户 的 活动 ,分 析出 用 户 最 关注 、 最 常用 的 业务 功能 ,以 及 
达到 业务 功能 的 操作 路 径 ;用 户 调查 分 析 是 在 不 具备 系统 日 志 分 析 条 件 ( 例 如 ,该 系统 尚 
未 交付 用 户 运行 实际 的 业务 ?时 采用 的 一 种 估算 方法 ,可 以 通过 用 户 调查 问卷 .同类 型 系 
统 对 比 的 方法 获取 用 户 最 关注 .最 常用 的 业务 功能 等 内 容 。 

经 过 用 户 活动 分 析 之 后 ,最 终 形成 的 结果 类 似 于 以 下 的 描述 : 

用 户 最 关心 的 业务 之 一 是 A 业务 ,该 业务 具有 平均 每 天 3000 次 的 业务 发 生 率 , 业 务 
发 生 时 间 集 中 在 9:00 一 18:00 的 时 间 段 内 ,业务 发 生 的 峰值 为 每 小 时 1000 次 。A 业务 的 
操作 步骤 如 下 所 示 : 

Q@ 用 户 单 击 “发 布 公告 "链接 。 

@ 用 户 在 出 现 的 页 面 中 填写 公告 内 容 。 

@ 用 户 单 击 “ 提 交 ” 按 钮 进行 提交 。 

业务 建 模 是 对 业务 系统 的 行为 及 其 实现 方式 和 方法 的 建 模 ,一 般 采 用 流程 图 的 方式 
描绘 出 各 进程 之 间 的 交互 关系 和 数据 流向 。 对 复杂 的 业务 系统 来 说 ,业务 建 模 可 以 将 业 
务 系统 清晰 地 呈现 出 来 ,为 性 能 测试 提供 最 直观 的 指导 。 
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(3) 确定 性 能 目标 。 

性 能 测试 目标 根据 性 能 测试 需求 和 用 户 活动 分 析 结 果 来 确定 ,确定 性 能 测试 目标 的 
一 般 步骤 是 首先 从 需求 和 设计 中 分 析出 性 能 测试 需求 ,结合 用 户 活动 剖析 与 业务 建 模 的 
结果 ,最 终 确定 性 能 测试 的 目标 。 

性 能 测试 需求 的 来 源 可 以 是 多 方面 的 ,例如 ,需求 文档 、 用 户 备忘录 或 是 用 户 的 邮件 
都 可 能 体现 出 用 户 对 性 能 的 要 求 。 确 定性 能 目标 首先 要 做 的 就 是 从 这 些 文档 中 获取 性 能 

根据 不 同 的 性 能 测试 应 用 领域 分 析 结 果 ,性 能 目标 定义 会 稍 有 不 同 。 

对 于 “规划 能 力 ” 领 域 ,性 能 目标 的 描述 类 似 如 下 : 

系统 的 A 业务 在 未 来 的 三 个 月 内 每 天 的 业务 吞吐 量 达 到 4000 笔 , 找 出 系统 的 性 能 
瓶颈 并 给 出 可 支持 这 种 业务 量 的 建议 。 

对 于 “能 力 验证 "领域 ,性 能 目标 的 描述 应 该 类 似 以 下 描述 : 

该 应 用 能 够 以 1s 的 最 大 响应 时 间 处 理 200 个 并 发 用 户 对 业务 A 的 访问 ;峰值 时 刻 
有 400 个 用 户 ,允许 响应 时 间 延 长 为 3s。 

对 于 “性 能 调 优 ”领域 ,最 终 确 定 的 性 能 目标 的 描述 类 似 如 下 : 

通过 性 能 调 优 测试 ,本 系统 的 A 业务 和 B 业务 在 200 并 发 用 户 的 条 件 下 ,响应 时 间 
提高 到 3s。 

在 “能 力 验 证 "领域 和 "性 能 调 优 ”领域 的 性 能 目标 描述 中 ,对 响应 时 间 , 平 均 的 并 发 用 
户 数 量 ( 或 是 吞吐 量 ) .峰值 的 并 发 用 户 数量 (或 是 吞吐 量 ) .该 性 能 目标 针对 的 业务 都 进行 
了 明确 的 定义 。 当 然 ,在 性 能 测试 目标 中 ,还 可 以 加 上 此 时 对 系统 资源 使 用 的 定义 。 一 个 
更 为 完整 的 描述 类 似 如 下 : 

该 应 用 能 够 以 1s 的 最 大 响应 时 间 处 理 200 个 并 发 用 户 对 业务 A 的 访问 ,此 时 服务 
器 的 CPU 占用 不 超过 75% ,内 存 使 用 率 不 超过 70% ;峰值 时 刻 有 400 个 用 户 , 人 允许 响应 
时 间 延 长 为 3s, 此 时 服务 器 的 CPU 占用 不 超过 85% ,内 存 使 用 率 不 超过 90% 。 

(4) 制订 测试 时 间 计划 。 

该 活动 给 出 性 能 测试 的 各 个 活动 起 止 时 间 ,为 性 能 测试 的 执行 给 出 时 间 上 的 估算 。 
具体 方法 是 根据 性 能 测试 活动 ,为 每 个 活动 阶段 给 出 可 能 的 时 间 估 计 , 最 终 形成 时 间 上 的 
计划 。 


11.2.4 测试 设计 与 开发 


性 能 测试 的 设计 与 开发 阶段 包括 测试 环境 设计 、 测 试 场景 设计 、 测 试用 例 设 计 、 脚 本 
和 辅助 工具 开发 活动 。 

(1) 测试 环境 设计 。 

测试 环境 设计 是 测试 设计 中 不 可 缺少 的 环节 。 人 性 能 测试 的 结果 与 测试 环境 之 间 的 关 
联 性 非常 大 ,无 论 是 哪 种 领域 内 的 性 能 测试 ,都 必须 首先 确定 测试 环境 。 

对 于 “能 力 验证 ”领域 的 性 能 测试 来 说 ,测试 环境 不 特定 ,但 也 需要 设计 一 个 基准 的 
环境 。 
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对 于 ”性 能 调 优 ?领域 的 性 能 测试 来 说 ,因为 调 优 过 程 是 一 个 反复 的 过 程 ,在 每 个 调 优 
小 阶段 的 末尾 ,都 需要 由 性 能 测试 来 衡量 调 优 的 效果 ,因此 必须 在 开始 就 给 出 一 个 用 于 衡 
量 的 环境 标准 ,并 在 整个 调 优 过 程 中 ,保证 每 次 测试 时 的 环境 保持 不 变 。 

这 里 所 说 的 测试 环境 设计 包括 系统 的 软 / 硬 件 环 境 \ 数 据 环 境 设计 、 环 境 的 维护 方法 。 
其 中 ,数据 环境 设计 是 非常 关键 但 又 最 容易 被 忽视 的 问题 。 系 统 运行 在 一 个 已 有 数 万 条 
数据 的 数据 库 和 一 个 几乎 为 空 的 数据 库 环 境 下 ,其 执行 查询 .插入 和 删除 操作 的 响应 时 间 
显然 是 不 同 的 。 

(2) 测试 场景 设计 。 

测试 场景 设计 活动 用 于 设计 测试 活动 需要 使 用 的 场景 。 在 “确定 测试 目标 ”活动 中 ， 
描述 了 如 何 确定 测试 目标 ,以 及 测试 目标 的 一 般 描 述 , 这 个 活动 需要 更 详细 地 将 测试 目标 
转化 为 能 够 在 测试 执行 中 使 用 的 内 容 。 

测试 场景 模拟 的 一 般 是 实际 业务 运行 的 剖面 。 对 性 能 测试 而 言 ,“ 剂 面 " 表 示 的 是 某 
个 时 刻 用 户 使 用 该 应 用 的 典型 模式 ,一般 由 “用 户 执行 的 操作 ”“ 执 行 不 同 操作 的 用 户 比 
例 ” 以 及 “用 户 使 用 系统 的 频率 ”进行 描述 。 测 试 场景 模拟 包括 业务 ,业务 比 例 、 测 试 指标 
的 目标 以 及 需要 在 测试 过 程 中 进行 监控 的 性 能 计数 器 。 

测试 场景 可 以 是 多 个 测试 目标 的 综合 体现 , 表 11-4 描述 了 一 个 测试 场景 的 内 容 。 

表 11-4 测试 场景 示例 


场景 名 称 场景 业务 及 用 户 比 例 分 配 测试 指标 性 能 计数 器 

用 户 登 录 登录 业务 ,100% 用 户 响应 时 间 服务 器 CPU Usage 
总 用 户 数 200 人 (<5s) 服务 器 内 容 Usage 
入 账 业 务 ,40% 用 户 响应 时 间 

i 查询 业务 ,30% 用 户 (和 人 账 二 6s) 服务 器 CPU Usage 

标准 日 常 工作 | 。 统计 业务 ,30% 用 户 (查询 一 5s) 服务 器 内 容 Usage 
总 用 户 数 200 人 (统计 二 10s) 


场景 可 被 看 作用 户 实际 运行 环境 的 “剖面 ,也 就 是 说 ,场景 体现 的 是 用 户 实际 和 运行 环 
境 中 的 具有 代表 性 的 业务 使 用 情况 。 用 户 场景 一 般 由 用 户 在 某 一 个 时 间 段 内 所 有 业务 的 
使 用 状况 组 成 。 

表 11-4 中 描述 的 测试 场景 考虑 了 两 种 具有 代表 性 的 用 户 业 务 使 用 情况 : 一 种 是 “用 
户 登录 ”场景 ,该 场景 发 生 在 用 户 每 天 上 班 之 后 的 半 小 时 内 ,此 时 的 用 户 行为 是 “全 部 用 户 
执行 登录 操作 ”; 另 一 种 是 “标准 日 常 工作 ”场景 ,该 场景 用 于 描述 用 户 的 日 常 工作 ,在 这 个 
场景 中 ,用 户 执行 三 种 不 同 的 业务 “入账 ?业务 的 执行 用 户 占 40%,“ 查 询 ” 和 “统计 ”业务 
的 执行 用 户 占 30%。 

(3) 测试 用 例 设 计 。 

在 设计 完成 测试 场景 之 后 ,为 了 能 够 把 场景 通过 测试 工具 体现 出 来 ,并 能 用 测试 工具 
顺利 进行 测试 执行 ,因此 有 必要 针对 每 个 测试 场景 规划 出 相应 的 工具 部 署 、 应 用 部 署 、 测 
试 方法 和 步骤 ,这 个 过 程 就 是 测试 用 例 设 计 活 动 。 
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测试 用 例 是 对 测试 场景 的 进一步 细 化 , 细 化 内 容 包括 场景 中 涉及 业务 的 操作 序列 描 
述 ,场景 需要 的 环境 部 署 等 内 容 。 以 表 11-4 的 “用 户 登录 ”场景 为 例 ,要 将 其 细 化 为 用 例 ， 
就 需要 描述 “登录 业务 ”的 具体 步骤 ,例如 : 

“登录 业务 步骤。 

中 用 户 进 入 登录 页 面 。 

@ 用 户 输入 正确 的 用 户 名 和 口令 。 

@ 用 户 单 击 “登录 ”按钮 。 

@ 直到 出 现 登录 成 功 的 页 面 ,判断 该 页 面 成 功 显示 的 方法 是 HTML 页 面 内 容 中 的 
“欢迎 ”文本 。 

从 描述 中 可 以 看 到 ,在 用 例 中 ,一 个 业务 描述 会 被 描述 成 操作 的 序列 ,并 且 在 该 序列 
中 ,一 定 会 给 出 判断 业务 是 否 执 行 成 功 的 准则 。 

一 个 较为 复杂 的 性 能 测试 用 例 设计 内 容 如 图 11-2 所 示 。 


模拟 用 户 进程 名 称 
接收 信息 日 志 XXXXXXXXXXXXXXXXXXXX 
人 1 bi 各 1 
| 模拟 200 设 置 被 测 应 用 片 一 一 一 模拟 200 用 户 | 
1 上 1 1 
打印 报告 


模拟 用 户 进程 设备 
XXXXXXXXXXXXXXXXXXXX 


模拟 设备 和 模拟 用 户 进程 参数 说 明 : 
XXXXXXXXXXXXXXXXXXXX 


模拟 设备 和 模拟 用 户 进程 部 署 说 明 : 
XXXXXXXXXXXXXXXXXXXX 


图 11-2 一 个 较为 复杂 的 性 能 测试 用 例 


该 模型 用 于 产生 测试 的 负载 ,根据 测试 用 例 的 描述 ,需要 保持 200 个 并 发 用 户 的 操作 
维护 负载 ,因此 在 本 模型 中 ,在 “负载 机 1? 上 启动 了 200 个 模拟 设备 的 进程 ,在 “负载 机 2” 
上 启动 了 200 个 模拟 并 发 操作 的 客户 线程 (4 个 进程 ) ,每 个 线程 以 每 分 钟 1 条 命令 的 频 
度 发 送 命令 。 

测试 方案 如 下 : 

QO 时 间 同 步 方法 。 鉴 于 本 测试 的 模拟 设备 模拟 OMC 和 OMC 都 运行 在 不 同 的 机 
器 上 ,本 次 测试 的 结果 又 是 和 时 间 精 确 相关 的 ,因此 需要 一 个 精确 的 时 间 同 步 机 制 来 保证 
所 有 参与 测试 的 机 器 在 时 间 上 是 一 致 的 ;在 这 一 方案 中 ,选择 了 一 台 UNIX 主机 作为 时 
间 同 步 的 服务 器 ,在 其 他 UNIX 主机 上 通过 ntp 进行 时 间 同 步 ; 在 Windows 终端 上 通过 
开源 的 network time 程序 进行 时 间 同 步 。 

@ 设备 和 用 户 模拟 方法 。 用 模拟 程序 M1 模拟 200 个 网 元 , M1 程序 能 接收 用 户 下 
发 的 命令 CMD1、CMD2 并 发 送 回应 ;用 模拟 程序 M2 模拟 200 个 客户 端 进行 连接 ,充当 
负载 ;M2 程序 以 每 分 钟 一 条 命令 的 频率 随机 发 送 CMD1 和 CMD2 命令 。 

@ 执行 方法 。 实 际 运行 一 个 被 测 应 用 ,在 被 测 应 用 中 由 用 户 手 工 输入 命令 ,程序 记 
录 下 用 户 输入 命令 时 间 等 关键 时 间 点 。 
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@ 数据 记录 方法 。 为 了 记录 时 间 Tl1、T2、T3、T4, 有 以 下 约定 。 

a. M1 发 送 的 命令 附带 发 送 时 的 时 间 截 。 

b. 被 测 应 用 在 发 送 命令 时 ,附带 一 个 用 户 输入 命令 结束 的 时 间 戳 。 这 个 时 间 就 是 所 
定义 的 时 间 T3 。 

c. M1 记录 接收 到 命令 的 时 间 T1 ,并 从 接收 到 的 命令 中 分 离 出 时 间 T3 ,记录 Tl1、T3 
和 T3-T1;MIl 在 发 送 回应 的 时 候 在 回应 的 报 文中 附带 发 送 时 的 时 间 戳 (T2) 。 

d，M2 程序 接收 网 元 模拟 程序 发 送 的 回应 报 文 ,分 离 并 记录 出 其 中 的 时 间 T2、 记 录 
报 文 回 显 完成 的 时 间 T4, 并 计算 T4-T2。 

@ 测试 持续 时 间 。 持 续 测试 1 小 时 ,在 1 小 时 中 通过 被 测 应 用 发 送 命令 。 

(4) 脚本 和 辅助 工具 开发 。 

脚本 和 辅助 工具 的 开发 是 测试 执行 之 前 的 最 后 步骤 ,测试 脚本 是 对 业务 操作 的 体现 ， 
一 个 脚本 一 般 就 是 一 个 业务 的 过 程 描述 。 

除了 脚本 ,测试 辅助 工具 也 需要 在 本 活动 中 进行 开发 。 在 上 面 的 例子 中 ,M1 和 M2 
都 是 用 来 辅助 进行 测试 的 辅助 工具 ,通常 这 些 工 具 的 开发 也 放 在 该 活动 中 完成 。 除 了 这 
类 在 测试 中 充当 * 桩 模块 ?或 是 “驱动 模块 ”的 测试 辅助 工具 ,有 时 候 还 需要 提供 辅助 进行 
服务 器 性 能 监控 的 脚本 作为 测试 辅助 工具 。 特 别 要 说 明 的 是 ,性 能 测试 辅助 工具 的 失效 
会 影响 测试 结论 ,因此 测试 辅助 工具 需要 在 测试 过 程 中 进行 妥善 的 管理 ,对 其 进行 基本 测 
试 是 必要 的 。 

测试 脚本 的 开发 通常 基于 “录制 ”, 依 靠 工具 提供 的 录制 功能 ,可 以 将 需要 性 能 测试 关 
注 的 业务 在 工具 的 录制 下 操作 一 遍 , 然 后 基于 录制 后 的 脚本 进行 修改 和 调试 ,确保 其 在 性 
能 测试 中 能 顺利 使 用 。 最 常用 的 脚本 修改 和 调试 技巧 是 “参数 化 “关联 ”和 "日 志 输 出 ”。 


11.2.5 测试 执行 与 管理 


测试 和 执行 过 程 用 于 建立 合适 的 测试 环境 ,部 署 测试 脚本 和 测试 场景 ,执行 测试 并 记 
录 测试 结果 。 

(1) 建立 测试 环境 。 

该 活动 用 于 搭建 需要 的 测试 环境 。 在 设计 完成 用 例 之 后 就 会 开始 该 活动 。 该 活动 是 
一 个 持续 性 的 活动 ,在 测试 过 程 中 ,可 能 会 根据 测试 需求 进行 环境 上 的 调整 。 

建立 测试 环境 活动 需要 多 个 团队 角色 的 参与 ,环境 由 测试 设计 人 员 设 计 完 成 ,建立 测 
试 环境 的 活动 由 测试 实施 人 员 按 照 设 计 的 要 求 组 织 建立 ,团队 中 的 支持 角色 负责 协助 测 

建立 测试 环境 一 般 包 括 硬件 .软件 系统 环境 的 搭建 ,数据 库 环境 的 建立 ,应 用 系统 的 
部 署 ,系统 设置 参数 的 调整 ,以 及 数据 环境 的 准备 等 几 个 方面 的 工作 内 容 。 

一 般 来 说 ,建立 测试 环境 要 遵循 下 列 原则 。 

@ 真实 : 尽量 模拟 用 户 的 真实 使 用 环境 ; 

@ 干净 : 测试 环境 中 尽量 不 要 安装 与 被 测 软件 无 关 的 软件 ; 

加 无 毒 : 测试 工作 应 该 确保 在 无 毒 的 环境 中 进行 ; 
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图 独立 : 测试 环境 与 开发 环境 相互 独立 。 就 是 说 开发 环境 和 测试 环境 最 好 分 开 , 即 
测试 人 员 和 开发 人 员 分 别 用 不 同 的 服务 器 (数据 库 、 后 台 服务 器 等 ) ,避免 造成 相互 干扰 。 
测试 环境 的 维护 是 一 个 比较 困难 的 问题 。 性 能 测试 中 使 用 的 数据 量 巨大 ,每 次 运行 
测试 都 可 能 产生 大 量 的 测试 数据 ,而 且 性 能 测试 可 能 需要 部 署 大 量 的 测试 辅助 工具 和 程 
序 。 为 了 保证 测试 结果 的 可 比 性 ,一 般 都 需要 在 每 次 测试 结束 后 恢复 初始 的 测试 环境 ,如 


果 管 理 不 善 ,这 一 恢复 工作 经 常会 引起 很 大 的 混乱 。 
在 每 次 测试 运行 完成 后 ,准备 进行 下 一 轮 的 测试 运行 之 前 ,用 检查 列表 (Checklist) 来 
检查 环境 的 可 用 性 ,参见 表 11-5。 


表 11-5 ”测试 环境 检查 的 检查 列表 
条 目 名 称 检查 内 容 责任 人 维护 方法 
硬件 环境 | 硬件 环境 是 否 与 拓扑 描述 一 至 硬件 拓扑 结构 图 
软件 环境 是 与 罗 件 列表 中 的 ee 
软件 环境 | 应 用 部 署 是 否 成 功 用 训 本 入 本 
测试 畏 助 工具 部 署 检查 
测试 辅助 工具 是 否 部 署 成 功 ee 
软件 参数 设置 是 否 符合 要 求 
数据 是 否 与 数据 要 求 描述 表 中 的 一致 
数据 要 求 描述 表 
到 环境 | 上 次 测试 是 下 人 了 帮 外 的 数据 而 数据 维护 牌 本 或 是 录入 (import) 方 式 


(2) 部 署 测试 脚本 和 测试 场景 。 

在 建立 合适 的 测试 环境 之 后 , 接 下 来 的 工作 是 部 署 测试 脚本 和 测试 场景 。 
脚本 和 测试 场景 活动 通过 测试 工具 本 身 提 供 的 功能 来 实现 。 

对 脚本 和 场景 的 部 署 需要 熟悉 测试 工具 的 人 员 来 完成 ,在 过 程 模型 中 ,该 活动 由 测试 
实施 人 员 进 行 。 在 场景 部 署 完 成 后 ,一 般 需 要 一 个 确认 步骤 ,在 该 步骤 中 ,测试 设计 人 员 
确认 场景 部 署 与 预期 的 设计 一 致 。 

部 署 活 动 最 终 需要 保证 场景 与 设计 的 一 致 性 ,保证 需要 监控 的 计数 器 都 已 经 部 署 好 
了 相应 的 监控 手段 。 

(3) 执行 测试 和 记录 结果 。 

准备 好 环境 和 部 署 好 测试 脚本 以 及 场景 后 ,就 可 以 执行 测试 并 记录 测试 结果 了 。 在 
测试 工具 的 协助 下 ,测试 执行 是 非常 简单 的 操作 ,一 般 只 需要 使 用 菜单 或 是 按钮 就 可 以 完 
成 ;记录 测试 结果 也 可 以 依靠 测试 工具 完成 ,通过 测试 工具 的 监控 (Monitor) 模 块 ,可 以 获 
取 并 记录 需要 关注 的 性 能 计数 器 的 值 。 

在 测试 工具 本 身 不 提供 对 需要 关注 的 性 能 计数 器 进行 监控 的 功能 时 ,可 以 用 一 些 操 
作 系 统 的 工具 ,自行 编制 部 分 脚本 解决 这 个 问题 。 一 般 的 方法 是 用 脚本 调用 操作 系统 提 
供 的 工具 ,在 脚本 实现 中 将 各 性 能 计数 器 值 分 析出 来 并 按照 一 定 的 格式 记录 在 本 地 文 
件 中 。 


部 署 测试 


一 一 千夫 
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11.2.6 测试 分 析 


测试 分 析 过 程 用 于 对 测试 结果 进行 分 析 , 根 据 测 试 的 目的 和 目标 给 出 测试 结论 。 

性 能 测试 的 挑战 性 在 很 大 程度 上 体现 在 对 测试 结果 的 分 析 上 。 可 以 说 ,每 次 性 能 测 
试 结果 的 分 析 都 需要 测试 分 析 人 员 对 软件 性 能 、 软 件 架 构 和 各 种 性 能 指标 具有 相当 程度 
的 了 解 。 

测试 分 析 过 程 是 一 个 灵活 的 过 程 ,很 难 给 出 一 种 具体 的 、 能 适应 各 种 性 能 测试 需要 的 
统一 的 过 程 活动 列表 。 性 能 测试 的 分 析 需 要 借助 各 种 图 表 , 一 般 的 性 能 测试 工具 都 提供 
了 报表 模块 来 生成 不 同 的 图 表 , 报 表 模 块 同时 还 允许 用 户 通过 县 加 、 关 联 等 方式 处 理 和 生 
成 新 的 图 表 。 

人 性 能 分 析 的 通用 方法 之 一 是 “拐点 分 析 ?” 法 “拐点 分 析 "? 法 是 一 种 利用 性 能 计数 器 曲 
线 图 上 的 拐点 进行 性 能 分 析 的 方法 。 该 方法 的 基本 思想 基于 这 个 事实 : 性 能 产生 瓶颈 是 
由 于 某 个 资源 的 使 用 达到 了 极限 ,此 时 的 表现 是 随 着 压力 增 大 系统 性 能 表现 急剧 下 降 , 因 
此 ,只 要 关注 性 能 表现 上 的 “拐点 ”, 获 得 “拐点 "附近 的 资源 使 用 情况 ,就 能 够 定位 出 系统 
的 性 能 瓶颈 。“ 拐 点 分 析 "? 法 在 确定 引起 系统 瓶颈 的 系统 资源 方面 能 发 挥 一 定 作 用 ,但 由 
于 它 只 能 定位 到 资源 上 的 制约 ,而 不 能 直接 定位 到 引起 制约 的 原因 ,该 方法 还 必须 配合 其 
他 方法 使 用 。 


11.3 ”敏捷 性 能 测试 模型 


敏捷 开发 方法 是 一 组 软件 开发 方法 的 集合 , 它 鼓 励 协 作 、 交 互 、 面 向 可 交付 的 产 出 , 通 
过 和 迭代 的 方式 实现 小 步 快走 ,目标 是 在 需求 不 断 变化 的 情况 下 能 够 按时 交付 满足 用 户 需 
求 的 产品 。 敏 捷 开发 在 近年 来 被 越 来 越 多 的 公司 和 组 织 所 接受 ,已 经 成 为 一 种 主流 的 开 
发 方法 。 

“敏捷 测试 ?这 个 术语 通常 指 敏 捷 开 发 方法 中 测试 相关 的 部 分 。 相 对 于 传统 的 软件 开 
发 过 程 ,敏捷 开发 方法 中 的 测试 工作 与 开发 工作 联系 更 紧密 ,更 注重 建立 对 应 用 的 多 层 
次 ,多 角度 的 测试 标准 。 从 具体 的 测试 方法 上 来 说 ,敏捷 测试 具有 更 大 的 灵活 性 ,广泛 采 
用 探索 式 测试 方法 。 探 索 式 测试 侧重 对 应 用 的 探索 ,在 执行 测试 过 程 中 根据 测试 者 的 经 
验 和 应 用 的 表现 设计 并 执行 新 的 用 例 。 

性 能 测试 具有 探索 式 的 特性 ,回顾 一 下 执行 性 能 测试 的 过 程 : 设 定性 能 测试 场景 和 
性 能 测试 目标 一 一 使 用 性 能 测试 工具 对 被 测 应 用 施加 压力 一 一 观察 应 用 系统 在 压力 下 的 
表现 。 在 整个 过 程 中 ,无 法 预期 被 测 系统 在 给 定 负载 下 的 具体 性 能 表现 ,大 多 数 情况 下 ， 
都 会 根据 系统 在 给 定 负载 下 的 性 能 表现 决定 下 一 步 的 操作 ,一 旦 发 现 给 定 负载 下 某 些 可 
能 的 性 能 瓶颈 ,就 会 立即 设计 新 的 测试 ,以 验证 和 确认 性 能 瓶颈 所 在 。 因 此 ,性 能 测试 过 
程 典型 地 具有 探索 式 的 特性 。 另 一 方面 , 随 着 应 用 系统 的 日 趋 复杂 , 仅 在 系统 测试 和 验收 
测试 阶段 执行 性 能 测试 已 经 不 能 满足 尽早 发 现 和 解决 系统 性 能 瓶颈 的 要 求 ,性 能 需求 可 
能 要 分 解 到 应 用 单元 (模块 、 接 口 ,甚至 是 函数 ) 中 。 在 这 种 情况 下 ,建立 各 层次 的 性 能 标 
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准 并 在 各 层次 上 开展 性 能 测试 就 非常 必要 了 。 本 节 将 从 检查 表 、 活 动 . 环 境 与 工具 三 个 方 
面 人 手 , 讨 论 与 敏捷 方法 结合 的 性 能 测试 。 

敏捷 性 能 测试 模型 (APTMD) 不 仅仅 适用 于 指导 敏捷 过 程 中 的 性 能 测试 开展 ,也 同样 
适合 在 非 敏捷 的 环境 下 尽早 建立 性 能 测试 ,尽早 发 现 系 统 可 能 的 性 能 问题 。 


11.3.1 APTM 的 检查 表 


作为 一 种 常用 的 工具 ,检查 表 可 以 为 使 用 者 提供 框架 和 指导 。 敏 捷 注重 过 程 的 灵活 
性 ,因此 ,在 采纳 敏捷 的 APTM 模型 中 ,不 倾向 于 定义 严格 的 过 程 ,而 是 使 用 检查 表 对 敏 
捷 性 能 测试 进行 指导 。 

APTM 的 检查 表 可 以 看 作 敏捷 性 能 测试 的 总 体 原则 。APTM 检查 表 的 内 容 体 现 了 
敏捷 性 能 测试 中 的 倾向 : 在 迭代 中 设立 性 能 目标 ,通过 性 能 测试 验证 性 能 目标 ;在 各 个 层 
面 上 建立 性 能 测试 ; 尽 可 能 通过 自动 化 的 方式 建立 敏捷 环境 下 的 性 能 测试 支持 环境 。 

APTM 中 常见 的 问题 介绍 如 下 : 

(1) 在 每 个 迭代 中 是 否 有 明确 的 性 能 测试 任务 ? 

在 每 个 迭代 中 设 定 明 确 的 性 能 测试 任务 可 以 帮助 开发 团队 明确 每 个 迭代 的 性 能 标 
准 ,安排 性 能 测试 的 时 间 。 并 非 每 个 迭代 中 都 需要 在 性 能 测试 上 花费 许多 时 间 ,但 不 管 怎 
样 ,在 每 个 迭代 中 考虑 性 能 测试 任务 (包括 函数 级 别 的 性 能 测试 ) 总 是 能 够 帮助 开发 团队 
更 好 地 思考 项 目的 性 能 要 求 。 

(2) 每 个 迭代 的 验收 测试 标准 中 是 否 有 性 能 验收 测试 标准 ? 

敏捷 的 每 个 迭代 都 需要 有 明确 的 标准 决定 一 个 迭代 是 和 否 可 以 结束 ,该 标准 就 是 迭代 
的 验收 测试 标准 。 只 有 在 验收 测试 标准 中 明确 设置 了 有 具体 的 性 能 标准 ,性 能 要 求 才 能 在 
每 个 迭代 中 得 到 实现 。 可 以 在 不 同 的 迭代 中 设 定 不 同 的 性 能 标准 ,能 够 在 5s 内 导入 
1MB 的 XML 文件 ?是 一 个 针对 模块 的 合理 的 性 能 验收 准则 ;在 10 000 个 用 户 的 条 件 下 
能 够 在 3s 内 完全 展示 应 用 首页 ”也 是 一 个 合理 的 性 能 验收 准则 。 

(3) 是 否 在 单元 ,接口 和 系统 级 别 分 别 设置 了 相应 的 性 能 测试 ? 

如 软件 性 能 工程 (SPE) 建 议 的 那样 ,在 不 同 层面 建立 性 能 测试 可 以 帮助 开发 者 尽早 
开展 性 能 测试 ,并 能 帮助 开发 者 将 性 能 需求 尽 可 能 地 分 解 到 更 小 的 层面 ,以 帮助 开发 者 更 
好 地 实现 和 管理 应 用 的 性 能 。APTM 建议 至 少 在 单元 接口 和 系统 三 个 层面 设置 相应 的 
性 能 测试 。 在 单元 层面 ,性 能 测试 通过 对 函数 的 运行 时 间 评 估 来 进行 ,涉及 的 依赖 通过 
Mock 方式 解决 ;在 接口 层面 ,性 能 测试 要 求 设置 接口 运行 环境 ,在 少量 用 户 的 情况 下 检 
查 接口 的 性 能 ;在 系统 层面 , 则 要 求 接近 生产 环境 的 性 能 测试 环境 ,通过 模拟 真实 的 用 户 
负载 来 进行 测试 。 

(4) 是 否 已 经 建立 合适 的 性 能 测试 支持 环境 帮助 实施 各 个 层次 的 性 能 测试 ? 

敏捷 环境 下 的 测试 高 度 依赖 自动 化 。 同 样 ,敏捷 性 能 测试 也 需要 良好 的 性 能 测试 支 
持 环境 。 图 11-3 给 出 了 简单 的 性 能 测试 支持 环境 的 图 示 。 一 般 而 言 ,性 能 测试 支持 环境 
包括 持续 集成 环境 ,性 能 测试 运行 环境 .基准 比较 环境 和 测试 环境 管理 几 个 主要 部 分 。 其 
中 ,性 能 测试 运行 环境 由 执行 性 能 测试 的 工具 构成 ,能 够 提供 从 单元 级 别 的 性 能 测试 到 系 
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统 级 别 性 能 测试 的 测试 执行 支持 ;基准 比较 环境 则 与 应 用 的 分 布 方式 相关 ,在 应 用 每 次 发 
布 时 对 其 主要 的 性 能 指标 进行 验证 ,保证 新 发 布 版 本 的 主要 性 能 指标 不 比 原 有 的 版 本 差 ; 
测试 环境 管理 则 主要 提供 各 个 层面 性 能 测试 环境 的 建立 功能 ,包括 单元 和 接口 级 别 的 
Mock 工具 ,数据 生成 工具 测试 环境 备份 和 恢复 工具 等 。 


L- 识别 性 能 测试 任务 优先 级 | “| 设置 环境 与 执行 测试 | “| 分 析 测试 结果 与 报告 J] 


性 能 测试 支持 环境 
持续 集成 环境 性 能 测试 运行 环境 基准 比较 环境 测试 环境 管理 


图 11-3 敏捷 性 能 测试 活动 


(5) 性 能 测试 结果 报告 是 否 包含 在 反馈 体系 中 ? 

作为 敏捷 的 核心 价值 观 之 一 ,反馈 为 敏捷 开发 团队 提供 了 良好 进度 和 质量 评估 机 制 ， 
持续 集成 (CD 就 是 一 个 典型 且 有 效 的 反馈 机 制 。 将 性 能 测试 结果 报告 包含 到 反馈 体系 
中 可 以 大 大 提高 性 能 测试 的 价值 ,帮助 开发 团队 更 好 地 管理 性 能 。 将 对 主要 性 能 指标 的 
测试 包含 到 持续 集成 环境 中 就 是 一 个 良好 的 实践 。 


11.3.2 APTM 中 的 活动 


敏捷 性 能 测试 使 用 迭代 的 方式 管理 性 能 测试 ,并 倾向 于 在 每 一 个 层面 上 建立 性 能 测 
试 。 如 果 考 察 每 个 迭代 中 的 性 能 测试 活动 , 则 需要 首先 在 每 个 迭代 中 识别 性 能 测试 任务 
的 优先 级 ,根据 优先 级 顺序 决定 在 当前 和 迭代 中 包含 哪些 性 能 测试 任务 。 在 确定 任务 之 后 ， 
需要 设置 测试 环境 并 执行 相应 的 性 能 测试 。 测 试 执行 完成 后 ,需要 对 结果 进行 分 析 并 报 
告 结果 。 一 个 迭代 中 的 性 能 测试 活动 与 传统 的 性 能 测试 组 织 过 程 比较 接近 ,不 同 的 部 分 
在 于 性 能 测试 任务 的 识别 。 传 统 意义 上 的 性 能 测试 通常 在 系统 或 验收 测试 阶段 开展 ,每 
次 开展 的 性 能 测试 必然 有 一 个 较为 明确 的 目标 (验证 系统 级 别 的 性 能 是 否 符合 性 能 需求 ， 
或 是 找到 系统 的 性 能 瓶颈 ) 。 但 在 敏捷 方法 中 ,每 个 迭代 中 的 性 能 测试 任务 都 需要 根据 其 
价值 进行 选择 ,只 有 高 价值 的 性 能 测试 任务 才 会 被 放 入 和 迭代 中 。 总 体 来 说 ,APTM 中 的 
主要 活动 如 下 : 

(1) 识别 性 能 测试 任务 优先 级 。 

(2) 设置 环境 与 执行 测试 。 

(3) 分 析 测 试 结果 与 报告 。 

(4) 在 下 一 个 迭代 中 重复 步骤 (1) 一 (3)。 

另 一 方面 ,由 于 敏捷 性 能 测试 要 求 在 每 个 迭代 、 每 个 层面 上 开展 ,因此 必须 具有 良好 
的 性 能 测试 支持 环境 。 

图 11-3 展示 了 由 持续 集成 环境 、 性 能 测试 运行 环境 、 基 准 比 较 环境 和 测试 环境 管理 
几 个 部 分 组 成 的 性 能 测试 支持 环境 。 

(1) 性 能 测试 任务 优先 级 。 

识别 任务 优先 级 是 敏捷 开发 的 每 个 迭代 中 首先 要 做 的 事情 。 敏 捷 遵循 “交付 价值 ” 原 
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则 ,在 每 个 迭代 中 需要 根据 其 产生 的 价值 决定 加 入 哪些 具体 的 性 能 测试 任务 。 敏 捷 开发 
方法 中 用 于 估算 和 确定 优先 级 的 方法 都 可 以 用 来 帮助 识别 和 确定 性 能 测试 任务 的 优 
先 级 。 

如 前 所 述 ,是 否 在 迭代 中 包含 某 个 性 能 测试 任务 是 由 该 任务 的 价值 决定 的 。 为 了 准 
确 评估 任务 的 价值 ,首先 需要 了 解 项 目的 上 下 文 、 被 测 系统 以 及 性 能 测试 的 目标 ,可 通过 


以 下 问题 更 好 地 了 解 。 

@ 客户 的 期 望 是 什么 ? 客户 希望 以 怎样 的 方式 验证 性 能 ? 客户 是 否 希 望 在 每 个 迭 
代 中 对 性 能 进行 评估 ? 

@ 发 布 流程 是 怎样 的 ? 性 能 测试 需要 关心 哪些 构建 (持续 集成 .日 构建 、 转 为 性 能 测 
试 发 布 的 构建 ,发布 构建 )? 

@ 性 能 目标 是 如 何 被 分 解 到 每 个 迭代 中 的 ? 开发 工程 师 会 在 单元 测试 中 包含 性 能 
验证 吗 ? 


@ 在 本 迭代 中 ,团队 最 关心 的 事情 是 验证 性 能 .量度 性 能 ,还 是 对 性 能 进行 调 优 ? 

@ 迭代 中 的 任务 优先 级 是 如 何 评估 的 ? 

当然 ,之 前 章节 中 对 性 能 测试 应 用 领域 的 分 析 同 样 适用 于 在 APTM 中 识别 性 能 测试 
的 目标 。 

(2) 设置 环境 与 执行 测试 。 

11. 2 节 中 讨论 的 性 能 测试 环境 设置 与 测试 执行 的 相关 内 容 同 样 适 用 于 APTM 模 
型 。 由 于 APTM 模型 中 涉及 的 性 能 测试 包括 单元 .接口 和 系统 多 个 层面 的 性 能 测试 ,而 
单元 与 接口 层面 的 性 能 测试 使 用 的 工具 和 技术 与 系统 级 别 的 性 能 测试 有 所 不 同 , 之 后 的 
章节 将 详细 讨论 APTM 中 使 用 的 工具 。 

(3) 分 析 测 试 结果 与 报告 。 

对 测试 结果 的 分 析 依 赖 与 具体 的 测试 目标 。 对 于 细 粒 度 的 性 能 测试 ,如 函数 级 别 的 
性 能 测试 ,由 于 其 环境 简单 ,测试 目标 单一 ,其 结果 分 析 非 常 简单 。 但 对 系统 级 的 性 能 测 
试 , 测 试 分 析 过 程 是 一 个 灵活 的 过 程 ,很 难 给 出 一 种 具体 的 、 能 适应 各 种 性 能 测试 需要 的 
统一 的 过 程 活动 列表 。 

在 APTM 中 ,性 能 测试 结果 报告 通常 包含 在 项 目的 反馈 体系 中 ,通过 在 持续 集成 、 验 
收 测试 等 反馈 环节 包含 性 能 测试 报告 ,开发 组 可 以 准确 地 了 解 每 个 迭代 ,每 次 提交 是 否 带 
来 了 对 性 能 需求 更 好 的 实现 。 


11.3.3 环境 与 工具 


敏捷 性 能 测试 中 的 活动 通常 需要 工具 与 环境 的 支持 ,下 面 对 具 体 的 环境 和 相应 工具 
进行 说 明 。 

(1) 持续 集成 环境 。 

持续 集成 环境 并 非 是 为 敏捷 性 能 测试 而 专门 设置 的 。 在 敏捷 体系 中 ,持续 集成 是 一 
种 最 佳 实践 ,提供 了 对 产品 质量 的 持续 评估 与 反馈 体系 。Martin Fowler 将 持续 集成 定义 
为 “一 种 软件 开发 实践 , 即 团队 开发 成 员 经 常 集成 他 们 的 工作 ,通常 每 个 成 员 每 天 至 少 集 
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成 一 次 ,也 就 意味 着 每 天 可 能 会 发 生 多 次 集成 。 每 次 集成 都 通过 自动 化 的 构建 (包括 编 
译 , 发 布 . 自 动 化 测试 ) 来 验证 ,从 而 尽快 发 现 集成 错误 。 许多 团队 发 现 这 个 过 程 可 以 大 大 
减少 集成 问题 ,让 团队 能 够 更 快 地 开发 内 聚 的 软件 .” 简 而 言 之 ,持续 集成 通过 持续 构建 的 
方式 保证 开发 工程 师 的 代码 能 够 经 常 性 地 进行 集成 ,在 集成 过 程 中 尽 可 能 早 地 发 现 问题 。 
对 敏捷 性 能 测试 来 说 ,持续 集成 通过 及 时 的 反馈 ,保证 性 能 测试 成 为 持续 的 产品 质量 评估 
体系 的 一 部 分 ,从 而 使 性 能 测试 在 敏捷 过 程 中 发 挥 更 大 的 价值 。 

(2) 测试 执行 环境 。 

性 能 测试 执行 需要 特定 工具 的 支持 。 敏 捷 性 能 测试 由 于 覆盖 了 多 个 层面 的 性 能 测 
试 ,需要 的 性 能 测试 工具 也 更 多 样 。 这 些 工具 都 能 在 敏捷 性 能 测试 中 针对 某 个 层面 的 性 
能 测试 发 挥 作用 。 此 外 ,在 单元 级 别 和 接口 级 别 , 能 够 发 挥 作用 的 工具 还 有 很 多 。 

@ 单元 层面 的 性 能 测试 工具 。 

单元 层面 的 性 能 测试 主要 用 来 对 应 用 的 函数 或 模块 进行 性 能 评估 。 对 算法 的 性 能 评 
佑 就 是 该 层面 性 能 测试 的 典型 例子 。 根 据 使 用 的 编程 语言 不 同 , 单 元 层面 的 性 能 测试 工 
具有 不 同 的 选择 。 以 Java 语言 为 例 , 从 JUnit4 开始 ,JUnit 工具 就 提供 了 函数 级 别 的 性 
能 测试 支持 。 在 JUnit4 中 ,通过 Timeout 标签 可 以 达成 对 性 能 测试 的 支持 。 例 如 下 面 的 
这 段 示例 代码 ,如 果 函 数 执行 的 时 间 超 过 500ms, 该 JUnit4 测试 就 会 失败 。 

@ Test (timecut= 500) public void retrieveAllFElementsInDocment (){ 

Doc.query("//* ") 

除了 JUnit, 还 有 其 他 一 些 类 似 的 工具 为 其 他 编程 语言 提供 类 似 的 支持 。 需 要 说 明 
的 是 ,单元 层面 的 性 能 测试 往往 需要 Mock 工具 的 支持 。Mock 工具 可 以 减少 应 用 对 环境 
的 依赖 性 ,并 增加 性 能 测试 的 可 靠 性 。 

@ 接口 层面 的 性 能 测试 工具 。 

用 于 接口 级 别 性 能 测试 的 工具 也 有 众多 选择 ,依赖 于 应 用 接口 的 不 同类 型 ,需要 选择 
不 同 的 工具 。 例 如 ,HTTP 接口 的 性 能 测试 工具 包括 curl-loader 等 ;SOAP 接口 的 性 能 
测试 工具 包括 SoapUI 等 ;REST 接口 的 性 能 测试 工具 可 以 使 用 RestClient 库 和 JMeter 
工具 建立 。 

@ 系统 层面 的 性 能 测试 工具 。 

系统 层面 的 性 能 测试 工具 的 选择 面相 对 较 窗 ,商业 工具 LoadRunner、 开 源 工具 
JMeter 以 及 前 端的 性 能 测试 工具 就 属于 此 类 。 

(3) 基准 比较 环境 。 

所 谓 基准 比较 ,是 指 基 于 构建 建立 的 一 套 比 较 机 制 。 例 如 ,可 以 为 应 用 的 发 布 版 本 建 
立 一 个 基准 性 能 测试 ,在 相同 的 测试 环境 和 负载 下 评估 每 个 发 布 版 本 的 主要 性 能 指标 ,各 
个 版 本 的 主要 性 能 指标 构成 的 曲线 可 以 清晰 地 显示 应 用 的 性 能 变化 趋势 ( 变 好 还 是 变 
坏 ) ,甚至 可 以 作为 版 本 是 否 能 够 发 布 的 评价 标准 。 

为 什么 需要 基准 比较 ?考虑 敏捷 性 能 测试 中 各 个 层面 的 性 能 测试 ,在 系统 层面 ,为 系 
统 建立 性 能 的 接受 准则 并 不 困难 (用 户 故 事 ) ,但 在 接口 和 单元 层面 ,也 许 并 不 能 在 每 个 迭 
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代 中 准确 定义 其 可 接受 的 标准 。 在 这 种 情况 下 .保证 “下 一 个 版 本 的 性 能 至 少 不 比 上 一 个 
版 本 更 差 ” 是 一 个 可 行 的 策略 。 该 策略 能 够 保证 应 用 的 性 能 一 直 具 有 变 好 的 趋势 。 
图 11-4 展示 了 某 接口 的 基准 测试 结果 。 
2.5 


1.5 
和 接口 i 响应 时 间 

1 

05 上 

0 


入 上 KA 公 公 公 区 
时 间 
图 11-4 某 接口 的 基准 测试 结果 


Db 


响应 时 间 /s 


(4) 测试 环境 管理 

敏捷 性 能 测试 中 的 测试 环境 管理 同样 需要 对 性 能 测试 所 需 的 软件 和 硬件 环境 进行 维 
护 , 需 要 与 产品 的 发 布 过 程 集成 ,需要 使 用 自动 化 方式 快速 建立 和 恢复 测试 环境 。 在 测试 
环境 管理 的 具体 方法 上 ,敏捷 性 能 测试 与 传统 性 能 测试 采用 的 方法 相同 。 


11.4 本 章 小 结 


本 章 介绍 了 性 能 测试 团队 中 人 员 的 构成 ,以 及 两 种 性 能 测试 模型 : PTGM 与 
APTM。PTGM 是 典型 的 可 用 于 系统 级 别 的 性 能 测试 ,遵循 该 过 程 模型 ,可 以 在 系统 级 
别 上 完成 性 能 测试 ;而 APTM 模型 是 结合 了 敏捷 思想 的 性 能 测试 模型 ,与 PTGM 不 同 ， 
该 模型 并 不 强调 过 程 , 并 且 从 检查 表 、 活 动 和 工具 三 个 方面 介绍 了 APTM 模型 的 特点 和 
应 用 。 
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广义 地 讲 , 可 以 把 性 能 测试 过 程 中 使 用 到 的 所 有 工具 都 称 为 性 能 测试 工具 ,性 能 测试 
工具 分 为 两 大 类 ,服务 端 性 能 测试 工具 和 前 端 性 能 测试 工具 ;服务 端 性 能 测试 工具 需要 支 
持 产生 压力 和 负载 ,录制 和 生成 测试 脚本 ,设置 和 部 署 场景 ,产生 并 发 用 户 和 向 系统 施加 
持续 的 压力 ;而 前 端 性 能 测试 工具 则 不 需要 关心 系统 的 压力 和 负载 ,只 需要 关心 浏览 器 等 
客户 端 工具 (目前 的 前 端 性 能 测试 工具 主要 是 Web 前 端 性 能 测试 工具 ) 。 


12.1 服务 器 端 性 能 测试 工具 架构 


图 12-1 给 出 了 服务 器 端 性 能 测试 工具 的 架构 。 一 般 来 说 ,服务 器 端 性 能 测试 工具 包 
括 以 下 部 件 。 


4 


Player 


图 12-1 服务 器 端 性 能 测试 工具 架构 


(1) 虚拟 用 户 脚本 生成 器 (Virtual User Generator); 
(2) 压力 产生 器 (Player) ， 

(3) 用 户 代理 (Agent); 

(4) 压力 调度 和 监控 系统 (Conductor); 

(5) 压力 结果 分 析 工 具 (Analysis) 。 
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1. 虚拟 用 户 脚 本 生成 器 


虚拟 用 户 脚 本 生成 器 的 常用 模式 是 通过 Proxy 方式 实现 的 ,但 是 目前 已 经 有 其 他 的 
模式 ,例如 LoaderRunner 中 就 以 端口 监听 的 方式 实现 。 

对 于 Proxy 方式 ,具体 来 说 ,就 是 通过 一 个 Proxy, 该 Proxy 作为 客户 端 和 服务 器 端 
之 间 的 中 间 人 (Middle Man) ,接收 从 客户 端 发 送 的 数据 包 , 记 录 并 将 其 转发 给 服务 器 端 ; 
接收 从 服务 器 端 返回 的 数据 流 , 记 录 并 返回 给 客户 端 。 这 样 ,无 论 是 客户 端 还 是 服务 器 端 
都 以 为 自己 在 一 个 真实 的 运行 环境 中 ,而 虚拟 脚本 生成 器 能 通过 这 种 方式 截获 并 记录 客 
户 端 和 服务 器 端 之 间 的 数据 流 。 

对 于 端口 监听 方式 ,测试 工具 会 自动 监控 用 户 所 指定 的 URL 或 应 用 程序 所 发 出 的 
请 求 及 服务 器 返回 的 响应 , 它 作 为 一 个 第 三 者 监视 着 客户 端 与 服务 器 端的 所 有 对 话 , 然 后 
把 这 些 对 话 记 录 下 来 ,生成 脚本 ,再 次 运行 时 模拟 客户 端 发 出 的 请 求 ,捕获 服务 器 端的 响 
应 。 它 在 做 监视 时 会 自动 捕 提 客户 端 发 出 请 示 时 所 用 的 端口 ,并 根据 请 求 内 容 向 服务 器 
端的 相应 端口 发 送 , 而 服务 器 回应 时 ,根据 请 求 消息 中 的 端口 向 客户 端 某 个 端口 发 出 回 
应 ,也 就 是 说 监听 的 端口 是 由 应 用 程序 或 请 求 所 决定 的 。 

当然 ,截获 数据 流 仅仅 是 虚拟 脚本 生成 器 的 第 一 个 步骤 ,在 截获 数据 流 之 后 ,虚拟 脚 
本 生成 器 还 需要 根据 录制 时 选择 的 协议 类 型 ,对 数据 流 进行 分 析 , 然 后 ,用 脚本 函数 将 客 
户 端 和 服务 器 端 之 间 的 数据 流 交互 过 程 体现 为 脚本 的 语句 。 下 面 的 例子 是 用 性 能 测试 工 
具 LoadRunner 录制 生成 的 脚本 片段 (HTTP 协议 ) : 


web_add cookie ("PREF= ID= 235bcabf6ffeabaf:Ni= 1:TM= 112082384 
G6:IM= 1124062513:G 1:S= kvXkwVUAjnj 1DIFN; 
DMAIN= www.google.oom"); 


web_add_cookie ("remenberme= false; DMAIN= www.google.om"); 


web_url ("ww.google.om", 
"URI= http://www.google.om/™, 
"Resouroe= 0", 
"BecContentType= text/html", 
"Referer=", 
"Snapshot=t1.inf", 
"Mode= HIML", 
IDST); 
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"Name=q",，"Value= 软 件 测试 工具 "ENDTTEM, 
"Name= 1r", "Value= ", FNDTTEM, 
"Name=btnG",，"Value= Google 搜索 " ERDITEM, 
IAST); 


在 这 个 例子 中 ,访问 了 http://www. google. com 网 站 ,并 在 搜索 引擎 的 输入 框 中 输 
入 “软件 测试 工具 ”作为 搜索 关键 字 。 从 这 段 示例 代码 中 可 以 看 到 ,虚拟 用 户 脚本 生成 器 
在 截获 数据 流 后 对 其 进行 了 协议 层 上 的 处 理 , 最 终 形成 的 是 人 们 能 很 容易 看 懂 的 HTTP 
业务 交互 过 程 脚本 。 

除了 能 够 录制 应 用 之 间 的 通信 数据 流 生成 脚本 之 外 ,虚拟 用 户 脚 本 生成 器 一 般 还 自 
带 IDE 环境 ,用 户 可 以 通过 该 IDE 环境 对 脚本 进行 修改 和 调试 。 对 脚本 的 修改 和 调试 
中 ,最 常见 的 三 种 技巧 是 参数 化 .关联 和 Log 输出 。 


2. 压力 产生 器 


压力 产生 器 用 于 根据 脚本 内 容 ,产生 实际 的 负载 。 在 性 能 测试 工具 中 ,压力 产生 器 扮 
演 着 “产生 负载 ?的 角色 。 例 如 ,一 个 测试 场景 要 求 产生 100 个 虚拟 用 户 (VU), 则 压力 产 
生 器 会 在 调度 下 生成 100 个 进程 或 者 线程 ,每 个 线程 都 会 对 指定 的 脚本 进行 解释 执行 。 

设想 这 样 一 种 情况 : 性 能 测试 要 求 1000 个 VU 共同 进行 。 无 论 采 用 进程 还 是 线程 
作为 压力 产生 的 方式 ,它们 都 需要 一 定 的 系统 资源 ,一 般 来 说 ,一 台 具 有 512MB 内 存 的 
PC 可 以 顺利 运行 200 个 左右 的 VU, 但 对 需要 1000 个 VU 的 情况 ,显然 很 难 指望 通过 一 
台 PC 产生 如 此 多 的 VU。 这 时 ,唯一 的 解决 方案 就 是 通过 多 台 机 器 进行 协作 ,但 多 台 机 
器 之 间 如 何 产生 “步调 一 致 ” 的 VU 呢 ? 答案 就 是 “用 户 代理 ”。 


3. 用 户 代理 


用 户 代理 是 运行 在 负载 机 (Load Machine) 上 的 进程 ,该 进程 与 产生 负载 压力 的 进程 
或 是 线程 协作 ,接收 调度 系统 的 命令 ,调度 产生 负载 压力 的 进程 活 线程 ,从 这 个 意义 上 说 ， 
用 户 代理 也 可 以 被 看 作 压力 产生 器 的 组 成 部 分 。 

用 户 代理 一 般 以 后 台 方 式 在 负载 机 上 运行 。 


4. 压力 调度 和 监控 系统 


压力 调度 和 监控 系统 是 性 能 测试 工具 中 直接 与 用 户 交互 的 主要 内 容 。 压 力 调度 工具 
可 以 根据 用 户 的 场景 要 求 ,设置 各 种 不 同 脚本 的 VU 数量 ,设置 同步 点 等 ,而 监控 系统 则 
可 以 对 各 种 数据 库 、 应 用 服务 器 、 服 务 器 的 主要 性 能 技术 器 进行 监控 。 

例如 ,给 出 一 个 典型 的 用 户 场 景 的 描述 : 80 个 用 户 以 脚本 1 的 方式 对 系统 进行 访问 
操作 ,120 个 用 户 以 脚本 2 的 方式 对 系统 进行 访问 操作 ,用 户 数 按照 每 分 钟 增加 10 个 的 
方式 增长 ,对 这 个 场景 ,可 以 通过 压力 调度 系统 调度 80 个 VU 以 脚本 1 的 方式 产生 负载 ， 
同时 120 个 用 户 以 脚本 2 的 方式 产生 负载 .把 VU 的 增长 模式 设置 为 “每 60s 增加 10 个 
VU”。 
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不 同 的 性 能 测试 工具 可 以 提供 对 不 同类 型 的 服务 器 性 能 计数 器 监控 的 能 力 。 是 否 具 
有 强大 的 性 能 计数 器 监控 能 力 通 常 也 是 衡量 性 能 测试 工具 的 功能 是 否 完备 的 指标 之 一 。 
以 LoadRunner 为 例 ,其 可 以 对 大 部 分 数据 库 服务 器 应 用 服务 器 和 服务 器 主机 的 性 能 指 
标 进 行 监控 。 


5. 压力 结果 分 析 工具 


压力 结果 分 析 工具 可 以 用 来 辅助 进行 测试 结果 的 分 析 。 人 性 能 测试 工具 附带 的 分 析 工 
有 具 一 般 都 能 将 监控 系统 获取 的 性 能 计数 器 值 生 成 曲线 图 .折线 图 等 图 标 , 还 能 根据 用 户 的 
需求 建立 不 同 曲线 之 间 的 释 加 、 关 联 操作 ,从 而 提供 从 各 方面 揭示 压力 测试 结果 的 能 力 。 

仍然 要 强调 的 是 ,压力 结果 分 析 工 具 本 身 不 能 代替 分 析 者 进行 性 能 结果 的 分 析 , 最 多 
只 是 提供 多 种 不 同 的 数据 揭示 和 呈现 方法 而 已 。 对 这 些 数 据 进 行 分 析 必然 要 依靠 测试 工 
程 师 对 系统 性 能 分 析 的 经 验 和 知识 。 


12.2 性 能 测试 脚本 录制 时 的 协议 类 型 


本 章 的 开头 提 到 ,确定 性 能 测试 脚本 录制 时 使 用 的 协议 类 型 经 常 是 一 个 容易 引起 误 
会 的 问题 。 根 据 实际 情况 ,很 多 测试 工程 师 在 刚 接触 性 能 测试 时 ,常常 会 想当然 地 根据 开 
发 语言 等 来 决定 协议 的 选取 ,导致 录制 后 的 脚本 不 能 回访 成 功 。 

表 12-1 是 本 书 总 结 的 一 个 表格 ,该 表格 以 LoadRunner 工具 下 的 情况 为 例 大 致 给 出 
了 不 同类 型 的 应 用 在 选择 性 能 测试 脚本 录制 时 的 协议 的 考虑 方法 。 

表 12-1 性 能 测试 脚本 录制 时 的 协议 类 型 
应 用 类 型 应 用 特点 建议 选用 协议 备 注 


Web 应 用 一 般 采 用 HTTP/ 
HTTPS 协议 进行 性 能 测试 
脚本 录制 ,但 特别 要 指出 的 
是 ,有 些 借助 客户 端 运行 的 
HTTP/HTTPS 协议 组 件 扩展 功能 的 Web 应 用 ， 
其 客户 端 组 件 采 用 自 定 义 


应 用 采用 ASP 结构 、J2EE 


Web 应 用 | 或 是 dotNet 架构 


Socket 或 是 其 他 协议 与 服务 
器 进行 通信 ,此 时 需要 在 录 
制 时 选择 多 种 协议 
客户 端 程序 以 ADO、 | 例如 ,如果 后 台数 据 库 是 
OLEDB 方式 连接 后 台数 | 相 具 后 人 所 库 闫 型 过 笃 | Oracle, 则 在 录制 时 选择 
据 库 加 Oracle 协 议 
容 户 问 程序 以 ODBC 方式 
C/S 应 用 连接 后 台数 据 库 ODBC 协议 
容 户 端 和 服务 端 之 间 通 过 自 


定义 的 Socket 协议 进行 | Socket 协 议 
通信 
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续 表 
应 用 类 型 应 用 特点 建议 选用 协议 备 注 
例如 ,有 些 应 用 为 了 能 够 适 
应 复杂 的 广域网 环境 ,采用 
_ | HTTP 协议 作为 C/S 结构 
C/s 应 用 “| 其 他 协议 入 据 具 体 协议 闫 型 进行 | 应 用 的 客户 端 和 服务 端 之 间 
的 通信 协议 ,此 时 可 以 根据 
具体 的 协议 来 选择 录制 时 使 
用 的 协议 
i 这 里 提 到 的 是 针对 组 件 的 测 
COM/DCOM COM/DCOM 协议 
Re a 试 ,商业 性 能 测试 工具 一 般 
提供 了 一 种 直接 测试 组 件 接 
EJB EJB 协议 口 性 能 的 方法 
有 些 读者 可 能 会 用 HTTP 
来 录制 对 Web Service 服务 
Web Service Web Service 协议 进行 性 能 测试 的 脚本 ,建议 
使 用 专门 的 Web Service 协 
议 进行 录制 
服务 
Mail 服务 器 SMTP 和 POP 
FTP 服务 器 FTP 
其 他 根据 具体 的 协议 选择 最 接 
近 的 录制 协议 
Oracle Application Server 人 
SAP SAP 
应 用 服务 器 
Tuxedo Tuxedo 协议 
其 他 根据 具体 的 协议 选择 最 接 
近 的 录制 协议 


在 选择 录制 性 能 测试 脚本 的 协议 时 ,有 几 点 必须 说 明 的 内 容 : 

(1) 使 用 Socket 协议 可 以 对 任何 类 型 的 应 用 通信 进行 录制 ,但 这 种 录制 生成 的 脚本 
很 可 能 没有 任何 意义 。 举 个 简单 的 例子 : 假设 有 一 个 C/S 结构 的 数据 库 应 用 ,选择 
Socket 协议 固然 可 以 生成 脚本 ,但 脚本 中 的 内 容 不 具有 数据 库 流 , 而 这 种 数据 库 流 往往 
会 随 着 环境 的 细微 改变 而 进行 相应 的 调整 ,这 样 ,录制 后 的 脚本 就 只 能 在 非常 特定 的 环境 
( 软 硬 件 环境 、 时 间 环 境 ) 下 发 挥 作用 ,失去 了 脚本 本 身 必须 具有 的 适应 性 。 

(2) 在 对 通信 进行 录制 生成 脚本 后 ,对 脚本 进行 回放 ,有 时 会 出 现 回放 无 法 继续 的 情 
况 ( 停 留 在 某 个 步骤 无 法 进行 下 去 ) ,此 时 应 该 考虑 是 否 使 用 了 合适 的 协议 。 很 可 能 是 由 
于 协议 选择 不 正确 或 是 不 全 面 ,导致 部 分 通信 没有 录制 成 功 。 
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12.3 性 能 测试 工具 的 选择 与 评估 


对 需要 进行 性 能 测试 的 组 织 来 说 ,决定 使 用 哪 种 性 能 测试 工具 也 不 是 一 个 简单 的 问 
题 。 这 个 问题 通常 会 有 两 个 层面 的 意义 : 第 一 ,创建 还 是 购买 ? 第 二 ,如 果 购 买 , 如 何 选 
择 一 种 商业 的 工具 ? 


12.3.1 创建 还 是 购买 


“创建 还 是 购买 ?是 一 个 不 好 回答 的 问题 。 实 际 上 ,商业 化 的 工具 有 自身 的 优点 , 例 
如 ,其 稳定 性 好 ,适用 性 比较 广 ,而 且 总 体 的 拥有 成 本 比较 低 。 但 它 也 有 自身 的 缺点 : 学 
习 培 训 成 本 较 高 , 某 些 特殊 的 需求 不 能 满足 等 。 确 定 创建 还 是 购买 ,最 好 能 够 综合 多 个 方 
面 的 需要 进行 决策 。 如 果 需 要 的 是 一 个 仅 用 于 本 次 项 目测 试 的 工具 ,或 是 该 被 测 系统 使 
用 了 比较 特殊 的 协议 等 原因 ,可 以 考虑 自行 创建 所 需 的 测试 工具 ;和 否则 ,可 以 考虑 选择 购 
买 已 有 的 商业 测试 工具 。 表 12-2 给 出 了 创建 和 购买 各 自 的 优势 和 劣势 。 
表 12-2 创建 测试 工具 和 购买 测试 工具 的 比较 


创 建 购 买 
能 够 开发 出 最 适合 应 用 的 测试 工具 依赖 于 工具 本 身 提供 的 特性 , 较 难 扩展 
能 够 部 分 弥补 被 测试 系统 的 不 可 测试 性 只 能 从 被 测 应 用 角度 增强 设计 
易于 学 习 和 使 用 依赖 于 工具 的 易 用 性 和 所 提供 的 文档 
工具 的 稳定 性 和 可 靠 性 不 足 稳定 性 和 可 靠 性 有 一 定 的 保证 
总 体 拥有 成 本 高 总 体 拥有 成 本 低 
可 形成 组 织 特有 的 测试 工具 体系 很 难 与 其 他 产品 集成 


总 之 “购买 ?方式 可 以 以 较 低 的 总 体 成 本 快速 获得 可 用 的 软件 ,但 如 果 被 测 对 象 本 身 
有 一 定 的 特殊 需求 ,最 好 是 使 用 “创建 "方式 构造 适合 的 测试 工具 。 

“创建 ?方式 的 最 大 问题 是 成 本 和 工具 的 稳定 性 。 与 已 有 的 商业 测试 工具 比较 ,自行 
创建 的 测试 工具 一 般 存 在 稳定 性 和 可 靠 性 方面 的 问题 ,甚至 在 使 用 工具 测试 发 现 问题 后 ， 
还 需要 确定 该 问题 是 由 工具 引起 的 ,还 是 由 系统 故障 引起 的 。 另 外 ,自行 创建 的 工具 由 于 
其 适应 范围 较 小 ,通常 只 能 用 于 少 部 分 的 特定 项 目 ,因此 ,从 总 体 拥有 成 本 上 来 说 ,自行 创 
建 的 工具 通常 具有 较 高 的 成 本 。 


12.3.2 测试 工具 的 评估 和 选择 过 程 
图 12-2 描述 了 测试 工具 的 评估 和 选择 过 程 。 


测试 工具 的 评估 可 被 概要 描述 为 "从 很 多 可 用 的 工具 中 选择 一 个 工具 ”, 对 于 商业 化 
的 性 能 测试 工具 ,一 般 可 以 按照 下 列 的 过 程 进行 评估 : 
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很 多 工具 [ 一 个 工具 | 被 很 多 人 使 用 的 工具 


选择 过 程 执行 过 程 
图 12-2 测试 工具 的 评估 和 选择 过 程 


(1) 列 出 需要 的 工具 功能 列表 。 

这 个 步骤 以 列表 的 方式 给 出 所 需要 的 测试 工具 的 功能 列表 ,该 步骤 有 利于 在 不 同 的 
测试 工具 中 发 现 * 最 适合 自己 的 ”, 而 不 是 “具有 最 多 功能 的 ”。 软 件 测试 工具 厂商 在 推销 
自己 的 产品 时 ,一 般 会 强调 自己 的 产品 是 “功能 强大 的 ”, 但 强大 的 功能 同时 也 意味 着 更 高 
的 价格 。 如 果 从 一 开始 就 明确 自己 的 需要 ,就 可 以 避免 为 不 必要 的 功能 买单 ,或 是 在 购买 
之 后 才 发 现 工具 不 能 支持 测试 需要 。 

可 从 以 下 几 个 方面 考虑 需要 的 功能 ， 

中 工具 能 支持 被 测 系统 运行 的 平台 ( 软 硬 件 环 境 、 数 据 库 环 境 ) 吗 ? 

@ 工具 能 支持 被 测试 系统 使 用 的 协议 吗 ? 

@ 工具 是 否 能 够 支持 特殊 要 求 ,例如 防火 墙 ` 负 载 均衡 ,动态 页 面 的 生成 等 ? 

@ 工具 能 够 提供 对 人 们 关心 的 服务 器 .应 用 服务 器 或 是 数据 库 类 型 计数 器 的 监 
控 吗 ? 

G@ 工具 使 用 的 脚本 语言 功能 完善 吗 ? 

(2) 工具 比较 。 

该 步骤 的 主要 目的 是 比较 所 有 可 供 选择 的 工具 ,比较 内 容 包 括 以 下 几 个 方面 : 

O@ 功能 比较 。 评 价 各 种 不 同 工 具 与 所 需要 的 工具 的 功能 的 符合 程度 ,可 以 在 列 出 需 
要 的 工具 的 功能 时 ,一 并 给 出 每 个 需要 功能 的 优先 级 权重 ,这 样 在 进行 符合 度 评价 时 ,可 
以 得 出 每 个 工具 的 功能 符合 度 加 权 值 ,利用 该 加 权 值 进行 比较 。 

@ 工具 能 获取 支持 的 比较 。 这 个 方面 的 比较 包括 : 开发 商 或 是 代理 商 对 工具 的 支 
持 力度 如 何 ? 该 产品 的 平均 更 新 周期 有 多 长 ? 是 否 能 方便 地 在 应 用 中 获取 工具 的 使 用 支 
持 ? 产品 的 支持 方式 包括 哪些 ? 时效 性 如 何 ? 

@ 供应 商 的 信誉 。 这 方面 的 信息 主要 通过 其 他 客户 对 供应 商 的 评价 来 获得 。 

表 12-3 给 出 了 一 个 可 用 于 从 功能 方面 评估 性 能 测试 工具 的 表格 。 
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表 12-3 创建 测试 工具 和 购买 测试 工具 的 比较 


得 分 (每 项 满分 为 5 分 ) 
功 能 功能 子 项 


适用 性 符合 性 可 靠 性 


脚本 录制 


脚本 编辑 


脚本 调试 


可 供 选 择 的 脚本 语言 


脚本 事务 功能 


集合 点 功能 


参数 化 功能 


模拟 Think Time 


关联 功能 


HTTP/HTTPS 协议 
支持 协议 


oD 


响应 时 间 .吞吐 量 等 


应 用 服务 器 监控 


支持 监控 数据 库 监控 


服务 器 监控 


场景 


图 表 组 合 和 关联 
数据 分 析 


原始 数据 视图 


页 面 时 间 分 解 


证 书 支持 


其 他 功能 外 部 扩展 能 力 


网 络 带宽 模拟 


注 : @ 可 根据 实际 需要 的 协议 进行 评估 。 
@ 可 根据 实际 需要 监控 的 类 型 进行 评估 。 
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(3) 成 本 分 析 。 

工具 的 价格 是 成 本 的 主要 构成 ,工具 的 价格 和 产品 的 License 方式 直接 相关 。 评 估 
成 本 的 时 候 , 最 先 要 弄 清 楚 的 就 是 工具 的 License 方式 。 

不 同 的 性 能 测试 工具 会 采用 不 同 的 License 方式 。 可 别 小 看 了 这 些 License 方式 之 
间 的 差异 ,这 种 差异 很 可 能 会 直接 影响 到 拿 到 工具 的 价格 。 以 目前 最 常用 的 MI 的 性 能 
测试 工具 LoadRunner 和 Seague 的 Silk Performer 为 例 说 明 这 些 差别 。 

LoadRunner 的 License 方式 比较 灵活 ,License 按照 协议 .VU 数量 (可 视 为 允许 的 最 
大 并 发 用 户 数量 ) 性 能 监控 器 对 象 分 别 授予 ,例如 ,要 针对 一 个 Web 应 用 进行 测试 ,需要 
使 用 的 协议 可 能 是 HTTP/HTTPS 协议 ,测试 要 求 最 大 的 并 发 用 户 数 为 1000, 应 用 服务 
器 使 用 的 是 WebLogic、 数 据 库 使 用 的 是 Sybase, 则 必须 要 在 这 个 基础 上 才能 按照 MI 的 
License 方法 得 出 一 个 最 终 的 价格 。 

Silk Performer 的 License 方式 则 相对 简单 一 些 , 该 产品 分 为 Lite 和 Full 两 个 版 本 ， 
Lite 版 本 只 支持 Web 应 用 的 测试 ,Full 版 本 支持 更 多 的 应 用 协议 ,再 就 是 按照 VU 数量 
进行 不 同 的 License 授予 。 另 外 ,为 了 支持 短 时 间 内 的 项 目 性 能 测试 ,Silk Performer 还 
提供 了 一 种 “临时 性 ”的 License, 只 允许 在 指定 时 间 内 使 用 Silk Performer 工具 。 

在 了 解 工具 License 方式 的 基础 上 ,就 可 以 根据 需要 选择 产品 部 件 , 估 算 需 要 支付 的 
产品 价格 了 。 

工具 的 学 习 曲 线 和 必要 的 培训 成 本 也 是 必须 要 考虑 的 一 个 因素 。 永 远 不 要 相信 测试 
工具 供应 商 做 出 的 “我 们 的 工具 非常 简单 易学 ,只 需要 很 短 的 时 间 就 能 让 你 学 会 ”这 种 承 
诺 。 客 观 来 说 ,目前 的 商业 工具 在 产品 架构 和 界面 可 操作 性 方面 差别 不 大 ,学 习 曲 线 主要 
从 系统 支持 的 脚本 语言 类 型 是 否 被 使 用 者 熟悉 ,系统 测试 手册 以 及 产品 开发 商 或 是 代理 
商 是 否 提供 培训 支持 等 人 手 。 


12.4 本 章 小 结 


性 能 测试 工具 是 性 能 测试 过 程 中 必 不 可 少 的 帮手 ,但 是 目前 有 些 不 好 的 现象 是 : 部 
分 测试 工程 师 ,以 为 测试 工具 就 是 全 部 ,以 为 熟悉 了 对 测试 工具 的 一 些 操作 即 可 ,这 是 远 
远 不 够 的 。 作 为 一 名 合格 的 性 能 测试 工程 师 ,不 仅 要 学 会 对 测试 工具 的 操作 ,更 要 理解 测 
试 工具 的 原理 ,作用 和 局 限 性 。 

在 性 能 测试 的 过 程 中 ,性 能 测试 工具 的 应 用 是 否 合乎 实际 需求 ,常常 决定 着 测试 的 成 
败 。 因 此 对 性 能 测试 工具 的 了 解 程度 就 显得 尤为 重要 。 

本 章 以 著名 的 性 能 测试 工具 LoadRunner 为 例 ,描述 了 性 能 测试 工具 的 一 般 架 构 、 工 
具 的 组 成 部 分 以 及 各 部 分 的 作用 和 工作 原理 ,并 且 给 出 了 如 何 选 择 性 能 测试 工具 的 建议 。 
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需求 分 析 是 个 繁杂 过 程 ,而 性 能 测试 需求 除了 要 对 系统 的 业务 非常 了 解 ,还 需要 有 深 
厚 的 性 能 测试 知识 ,才能 够 挖掘 分 析出 真正 的 性 能 需求 。 

性 能 需求 分 析 是 整个 性 能 测试 工作 开展 的 基础 。 在 这 一 阶段 ,性 能 测试 人 员 需 要 与 
需求 人 员 ( 客 户 ) 领导 及 项 目 相关 人 员 进 行 沟通 ,同时 收集 各 种 项 目 资料 ,对 系统 进行 分 
析 ,确认 测试 意图 。 

测试 需求 分 析 阶 段 的 主要 任务 是 确定 测试 策略 和 测试 范围 。 策 略 主要 根据 软件 类 型 
以 及 用 户 对 系统 性 能 的 需求 来 定 , 测 试 范围 则 主要 对 系统 的 功能 模块 进行 调研 与 分 析 , 最 
终 确认 明确 的 需求 。 


13.1 制定 负载 测试 的 目标 


进行 测试 需求 分 析 , 首 先 要 明确 性 能 测试 目的 ,测试 目的 的 不 同 将 直接 影响 测试 策略 
的 制定 。 通 过 与 用 户 的 沟通 ,并 结合 对 被 测 软 件 的 了 解 , 归 纳 出 软件 的 结构 特征 、 用 户 应 
用 特征 、 用 户 关注 内 容 等 。 

负载 目标 关系 整个 测试 的 场景 设计 、 并 发 配 比 、 结 果 评 判 ,因此 确定 负载 目标 也 决定 
了 测试 的 总 体 方向 。 负 载 目标 应 该 是 系统 被 测 对 象 的 整体 目标 。 

通常 ,客户 会 提出 一 些 对 系统 的 需求 和 期 望 , 如 搜索 事务 应 该 足够 快 并 不 允许 失败 ， 
更 新 事务 在 工作 的 高 峰 时 间 能 正常 工作 ,在 第 二 年 期 待 系统 能 够 承受 两 倍 的 用 户 量 , 系 统 
在 1000 个 并 发 用 户 下 不 会 中 断 等 。 通 过 了 解 业务 需求 ,负载 目标 都 会 转化 为 一 系列 具体 
的 数值 。 典 型 的 负载 目标 有 响应 时 间 、 系 统 春 吐 量 、 系 统 资源 利用 率 等 ,一 般 可 从 两 方面 
来 划分 。 

前 端 : 业务 人 员 更 关注 前 端 并 发 用 户 数量 或 在 线 用 户 数量 ,以 人 数 衡量 。 

后 端 : 技术 人 员 更 关注 后 端 应 用 服务 器 和 数据 库 服务 器 的 负载 能 力 ,以 TPS 衡量 。 

前 端 并 发 用 户 数 量 的 计算 在 业界 中 有 很 多 公式 和 原则 ,如 2/8 原则 、10% 在 线 用 户 数 
量 估 算 、( 在 线 用 户 数量 X session 时 间 )/ 监 控 时 间 等 ,但 各 公式 和 原则 计算 出 的 并 发 用 户 
数量 并 不 精确 ,如 有 10 万 在 线 用 户 的 系统 不 能 说 仅 测试 10 万 X10% 二 1 万 并 发 用 户 
即 可 。 

后 端 TPS 反映 被 测 应 用 的 实际 负载 能 力 , 对 已 有 有 具体 业务 量 的 应 用 可 以 计算 精确 ， 
如 银行 系统 中 某 省 行 对 公交 易 量 日 均 10 万 笔 , 则 可 精确 计算 出 TPS 均值 =10 万 /(6 
3600) 一 4. 63 笔 / 秒 (对 公 业 务 按 6 小 时 计算 ) , 若 被 测 应 用 达 不 到 TPS 要 求 则 完成 不 了 
当日 业务 。 

同一 个 被 测 应 用 以 不 同 的 视角 估算 负载 目标 ,得 到 的 数值 可 能 会 有 很 大 的 差异 ,因此 
如 何 正确 选择 负载 目标 ,将 会 直接 影响 之 后 的 测试 方法 和 场景 设计 。 
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单 从 最 终 测试 指标 来 说 ,对 于 一 个 软 硬 件 环境 固定 的 应 用 程序 ,只 有 一 个 负载 指标 是 
固定 的 , 那 就 是 最 大 事务 处 理 能 力 ,通常 以 TPS 衡量。 因此 性 能 测试 的 目标 就 是 确定 被 
测 应 用 的 最 大 事务 处 理 能 力 。 

常规 情况 下 ,测试 目的 可 以 总 结 为 以 下 三 类 : 

(1) 主要 验证 软件 性 能 是 否 符合 软件 开发 合同 或 软件 需求 文档 中 的 要 求 ,是 否 符合 
预定 的 设计 目标 ,是 否 符合 用 户 现在 或 将 来 的 应 用 要 求 等 。 总 之 ,是 验证 软件 性 能 与 某 项 
已 知 (或 潜在 的 ) 标 准 或 要 求 明确 的 性 能 指标 的 符合 程度 ,可 称 之 为 性 能 符合 性 验证 。 

(2) 主要 是 在 无 明确 性 能 指标 的 情况 下 ,以 了 解 软 件 的 整体 性 能 状况 为 目的 ,如 软件 
所 能 支持 的 最 大 并 发 用 户 数 ,软件 在 不 同 环境 下 的 性 能 极限 。 软 件 性 能 随 用 户 数量 的 变 
化 情况 ,软件 性 能 随 环 境 变 化 的 情况 ,软件 所 能 支持 的 最 大 数据 量 、 支 持 的 最 低 运 行 环境 
等 ,可 称 之 为 软件 性 能 能 力 验 证 。 

(3) 主要 是 为 了 通过 性 能 测试 找 出 软件 系统 的 性 能 瓶颈 ,分 析 软 件 性 能 缺陷 的 原因 ， 
并 进行 针对 性 的 性 能 优化 ,以 改进 软件 性 能 , 称 之 为 性 能 调 优 。 性 能 调 优 是 性 能 能 力 验证 
测试 工作 的 进一步 深化 ,不 仅 包 含 了 性 能 测试 部 分 ,还 包括 了 性 能 调整 部 分 。 


13.2 收集 系统 信息 


收集 系统 有 用 信息 可 以 协助 人 们 决定 哪些 业务 流程 需要 录制 ,分 析 系统 的 最 大 负荷 
以 及 产生 最 大 负荷 的 时 间 段 ,并 确定 有 效 的 测试 数据 以 及 用 户 动作 。 系 统 有 用 信息 的 来 


源 大 致 有 以 下 几 种 。 

(1) 有 经 验 的 用 户 : 通过 与 有 经 验 的 用 户 交流 ,可 以 大 致 了 解 用 户 能 够 接受 的 响应 
时 间 和 用 户 习 惯 。 

(2) 系统 管理 员 : 对 于 已 有 具体 业务 量 的 系统 ,可 以 了 解 系统 运行 时 的 资源 利用 率 
等 情况 。 


(3) IT 文档 : 这 是 性 能 测试 需求 的 主要 来 源 ,项 目 开发 计划 书 、 需 求 规格 说 明 书 、 设 
计 说 明 书 、 测 试 计划 等 文档 都 可 能 涉及 性 能 测试 的 要 求 , 通 过 收集 这 些 资料 ,可 以 找到 初 
步 的 性 能 需求 。 相 关 的 项 目 干系 人 有 客户 代表 、 项 目 经 理 \ 需 求 分 析 员 、 系 统 架构 设计 师 、 
: 品 经 理 等 。 
(4) 在 线 统计 : 通过 参考 在 线 统计 的 历史 数据 ,可 以 了 解 系统 的 使 用 情况 ,如 每 月 、 
每 星期 、 每 天 的 峰值 业务 量 是 多 少 , 用 户 以 什么 样 的 速度 在 递增 中 ,用 户 对 系统 的 哪些 功 
能 模块 使 用 得 最 多 ,他 们 所 占 的 比例 等 信息 。 


13.3 制订 测试 计划 
确定 明确 的 需求 之 后 ,要 做 的 工作 就 是 制订 性 能 测试 计划 。 


测试 计划 的 大 体内 容 如 下 。 
(1) 项 目的 简单 背景 描述 : 本 次 性 能 测试 的 需求 与 目的 ,性 能 需求 分 析 的 结果 是 
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(2) 测试 环境 的 准备 : 需要 什么 样 的 软 硬 件 配置 ,网 络 状 况 登 录 。 

(3) 测试 数据 的 准备 : 对 于 某 些 性 能 测试 是 需要 事先 准备 测试 数据 的 。 

(4) 测试 的 策略 : 前 面 进行 需求 分 析 的 目的 是 制定 测试 策略 ,也 就 是 设计 符合 需求 
的 测试 场景 ,需要 对 系统 的 哪些 业务 模块 进行 测试 ,如 何 进行 ? 需要 设计 哪些 场景 以 及 设 
计 这 些 场景 的 目的 。 

(5) 人 员 配 备 ,如 需要 开发 .DBA、 运 维 等 人 员 的 参与 协助 。 

(6) 性 能 测试 的 时 间 安 排 。 


13.3.1 性 能 测试 需求 


性 能 测试 需求 是 应 用 需求 的 衍生 ,而 且 测 试用 例 也 必须 覆盖 所 有 的 测试 需求 ,否则 ， 
这 个 测试 过 程 就 是 不 完整 的 ,主要 有 以 下 几 个 关键 点 : 

(1) 测试 的 对 象 是 什么 ,例如 : 被 测 系统 中 有 性 能 需求 的 功能 点 包括 哪些 ;测试 中 需 
要 模拟 哪些 部 门 的 用 户 产生 的 负载 压力 等 问题 。 

(2) 系统 配置 如 何 ,例如 : 预计 有 多 少 用 户 并 发 访问 ;用 户 客户 端的 配置 如 何 ; 使 用 
什么 样 的 数据 库 ; 服 务 器 怎样 和 客户 端 通信 ;网 络 设备 的 吞吐 能 力 如 何 , 每 个 环节 承受 多 
少 并 发 用 户 等 问题 。 

(3) 应 用 系统 的 使 用 模式 是 什么 ,例如 : 使 用 在 什么 时 间 达 到 高 峰 期 ;用 户 使 用 该 系 
统 是 采用 B/S 运行 模式 吗 等 问题 。 

针对 用 户 提出 的 问题 ,做 一 个 简单 的 需求 问答 ,如 表 13-1 所 示 。 

表 13-1 用 户 需 要 与 测试 目标 


测试 目标 用 户 需 求 

测量 对 最 终 用 户 的 响应 时 间 要 花 多 少时 间 做 完 一 笔 交易 
确定 最 优 硬件 配置 什么 样 的 配置 提供 了 最 好 的 性 能 
检查 可 靠 性 系统 在 无 错 情况 下 能 承担 多 大 及 多 长 时 间 的 负载 
检查 软 硬 件 升级 这 些 升级 对 系统 性 能 的 影响 有 多 大 
评估 新 产品 服务 器 应 该 选择 哪些 硬件 与 软件 
测试 系统 负载 在 没有 较 大 性 能 衰减 的 前 提 下 ,系统 能 够 承受 多 大 负载 
分 析 系 统 瓶 颈 哪些 因素 降低 了 交易 响应 时 间 

需求 分 析 的 方法 有 以 下 几 种 : 

(1) 任务 分 布 图 方法 。 

使 用 任务 分 布 图 方法 应 关注 以 下 两 点 : 


有 哪些 交易 任务 。 

@ 在 一 天 的 某 些 特定 时 刻 系统 都 有 哪些 主要 操作 。 
举例 如 图 13-1 所 示 , 可 以 得 到 : 

@ 12:00., 交 易 混合 程度 最 高 。 
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@ 10:00 一 12:00 是 登录 高 峰 期 。 
@ 数据 更 新 业务 的 并 发 用 户 数 最 大 为 90 等 信息 。 


案例 并 发 用 户 数 
登录 22 
记 账 
创建 记录 
数据 更 新 
查询 
批 处 理 20 | 25° | 15 
生成 报表 | 50 | 60 
系统 备份 | 11 | 8 | 12 


测试 执行 周期 
图 13-1 任务 分 布 图 


(2) 交易 混合 图 方法 。 

使 用 交易 混合 图 方法 应 关注 以 下 三 点 : 

(系统 日 常 业务 主要 有 哪些 操作 ,高 峰 期 主要 有 哪些 操作 。 

@ 数据 库 操作 有 多 少 。 

@ 如 果 任 务 失败 ,那么 商业 风险 有 多 少 。 

选择 重点 交易 的 指标 为 高 吞吐 量 ,高 数据 库 1/O、 高 商业 风险 。 举 例如 表 13-2 所 示 ， 
“登录 ”“ 生 成 订单 ”以 及 “发 货 ” 为 性 能 测试 重点 。 

表 13-2 交易 混合 表 


交易 名 称 | 日 常 业务 /hr | 高 峰 期 业务 /hr | Web 服务 器 负载 | 数据 库 服 务 器 负载 | 风险 
登录 70 210 高 低 大 
开 一 个 新 账号 10 15 中 等 中 等 小 
生成 订单 130 180 中 等 中 等 中 
更 新 订单 20 30 中 等 中 等 大 
发 货 40 90 中 等 高 大 


(3) 用 户 概况 图 方法 。 

使 用 用 户 概况 图 方法 应 关注 以 下 两 点 : 

Q@ 哪些 任务 是 每 个 用 户 都 要 执行 的 。 

@ 针对 每 个 用 户 , 不 同人 物 的 比例 如 何 。 

如 表 13-3 所 示 为 任务 频率 表 , 性 能 测试 需要 模拟 不 同 用 户 角 色 的 压力 。 


111 


《软件 测试 理论 与 技术 》 


表 13-3 任务 频率 表 


订 票 部 门 (170) 飞行 部 门 (50) 经 理 (30) 
输入 订单 100 25 
更 新 订单 50 10 
计算 飞行 里 程 70 5 
计算 销售 8 


13.3.2 测试 环境 


测试 环境 直接 影响 测试 效果 ,所 有 的 测试 结果 都 是 在 一 定 软 硬 件 环境 约束 下 的 结果 ， 
测试 环境 不 同 ,测试 结果 可 能 会 有 所 不 同 , 对 于 性 能 测试 更 是 如 此 ,因为 性 能 测试 结果 往 
往 是 一 组 和 时 间 有 关 的 值 , 因 此 对 性 能 测试 环境 的 准备 就 显得 特别 重要 。 

(1) 测试 环境 的 基本 原则 。 

@D 要 满足 软件 运行 的 最 低 要 求 ,不 一 定 选择 将 要 部 署 的 环境 ; 

@ 选用 与 被 测 系统 相 一 致 的 操作 系统 和 软件 平台 ; 

@ 营造 相对 独立 的 测试 环境 ; 

@ 无 毒 的 环境 。 

(2) 性 能 测试 的 测试 环境 。 

性 能 测试 环境 准备 过 程 中 可 以 参考 测试 环境 的 基本 准则 ,但 是 又 要 考虑 性 能 测试 的 
特殊 性 和 性 能 测试 目的 。 性 能 测试 一 般 强 调 * 真 实 ” 应 用 环境 下 的 性 能 表现 ,从 而 实现 性 
能 评估 ,故障 定位 以 及 性 能 优化 的 目的 ,因此 在 性 能 测试 环境 的 准备 中 要 注意 以 下 几 点 : 

Q@ 如 果 是 完全 真实 的 应 用 运行 环境 ,要 尽 可 能 降低 测试 对 现 有 业务 的 影响 ; 

@ 如 果 是 建立 近似 的 真实 环境 ,要 首先 达到 服务 器 、 数 据 库 以 及 中 间 件 的 真实 ,并 且 
要 具备 一 定 的 数据 量 ,客户 端 可 以 次 要 考虑 ; 

@ 必须 考虑 测试 工具 的 硬件 和 软件 配置 要 求 ， 

@ 配置 与 业务 相关 联 的 测试 环境 需求 ; 

@@ 测试 环境 中 应 包括 对 交互 操作 的 支持 ; 

测试 环境 中 应 该 包括 安装 、 备 份 及 恢复 过 程 。 

(3) 测试 环境 配置 。 

@ 操作 系统 的 版 本 (包括 各 种 服务 .安装 及 修改 补丁 ); 

@ 网 络 软件 的 版 本 ; 

@ 传输 协议 ; 

@ 服务 器 及 工作 站 机 器 ; 

@ 测试 工具 配置 。 

(4) 良好 的 测试 环境 标准 。 

@ 保证 达到 测试 执行 的 技术 需求 ; 
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回 保证 得 到 稳定 的 、 可 重复 的 、 正 确 的 测试 结果 。 

大 多 数 情况 下 强调 在 真实 环境 下 检测 系统 性 能 ,在 实施 过 程 中 大 家 认为 这 样 做 会 遇 
到 很 多 阻力 ,如 真实 环境 下 ,不 允许 性 能 测试 为 系统 带 来 大 量 的 垃圾 数据 ;测试 数据 与 真 
实业 务 数据 混在 一 起 无 法 控制 测试 结果 ;性 能 测试 如 果 使 服务 器 宕 机 ,会 给 系统 带 来 巨大 
的 损失 等 。 那 么 应 该 如 何 理 解 “在 真实 环境 下 检测 系统 性 能 ” 呢 ? 

在 性 能 测试 中 强调 的 “真实 环境 ”是 指 后 台 服 务 器 与 客户 端 应 用 要 与 实际 应 用 环境 保 
持 一 致 ,同时 ,这 里 也 包括 了 与 业务 有 关 的 软 硬 件 配 置 环境 和 数据 量 环境 等 ,可 以 看 出 将 
网 络 环境 排除 在 外 。 原 因 是 网 络 环境 缓解 了 客户 端 对 服务 器 所 造成 的 并 发 负载 压力 ,网 
络 规 模 越 大 、 网 络 类 型 越 多 、 网 络 拓扑 越 复 杂 、 网 络 流量 越 纷繁 交织 ,对 客户 端的 并 发 负载 
压力 缓解 程度 越 大 。 


13.3.3 数据 准备 


实施 性 能 测试 时 ,需要 运行 系统 相关 业务 ,这 时 需要 一 些 数据 支持 才 可 运行 业务 ,这 
部 分 数据 即 为 初始 测试 数据 。 例 如 ERP 软件 运行 前 财务 账 套 的 准备 。 

在 初始 的 测试 环境 中 需要 输入 一 些 适 当 的 测试 数据 ,目的 是 识别 数据 状态 并 且 验 证 
用 于 测试 的 测试 案例 。 在 正式 的 测试 开始 以 前 对 测试 案例 进行 调试 ,将 正式 测试 开始 时 
的 错误 降 到 最 低 。 在 测试 进行 到 关键 过 程 领域 时 ,非常 有 必要 进行 数据 状态 的 备份 。 制 
造 初 始 数据 意味 着 将 合适 的 数据 存储 下 来 ,需要 的 时 候 恢 复 它 ,初始 数据 提供 了 一 个 基线 
用 来 评估 测试 执行 结果 。 

对 系统 实施 性 能 测试 的 时 候 , 经 常会 需要 准备 大 数据 量 、 实 施 独立 的 测试 ,或 者 与 并 
发 负载 压力 相 结 合 的 性 能 测试 ,这 部 分 数据 为 业务 测试 数据 。 例 如 飞机 订 票 系统 查询 订 
票 信息 ,就 需要 准备 大 量 的 订 票 记录 。 又 如 测试 并 发 查询 业务 ,那么 要 求 对 应 的 数据 库 和 
表 中 有 相当 的 数据 量 , 以 及 数据 的 种 类 应 能 覆盖 全 部 业务 。 

在 性 能 测试 过 程 中 ,为 了 模拟 不 同 的 虚拟 用 户 的 真实 负载 ,需要 将 一 部 分 业务 数据 参 
数 化 ,这 部 分 数据 为 参数 化 测试 数据 。 例 如 模拟 不 同 的 用 户 登 录 系统 ,就 需要 准备 大 量 用 
户 名 及 相应 密码 参数 数据 。 

还 需要 考虑 特殊 系统 需要 的 测试 数据 ,模拟 真实 环境 测试 。 有 些 软件 特别 是 面向 大 
众 的 商品 化 软件 ,在 测试 时 常常 需要 考察 在 真实 环境 中 的 表现 ,如 测试 杀毒 软件 的 扫描 速 
度 时 ,硬盘 上 布置 的 不 同类 型 文件 的 比例 要 尽量 接近 真实 环境 ,这 样 测试 出 来 的 数据 才 有 
实际 意义 。 

系统 所 需 数据 的 分 析 可 以 参考 以 下 方式 : 

(1) 历史 数据 分 析 有 助 于 数据 量 级 的 确定 。 从 历史 数据 入 手 , 找 出 高 峰 期 数据 量 。 

(2) 从 其 他 相似 或 者 相同 的 系统 入 手 ,进行 数据 分 析 , 找 出 高 峰 期 数据 量 。 

(3) 无 历史 或 者 相关 系统 可 以 参考 的 时 候 ,就 要 对 系统 的 性 能 数据 进行 估算 ,包含 系 
统 容量 ,并 发 数 等 数据 ,估算 及 给 相关 人 员 进 行 评审 或 者 修订 以 后 ,按照 大 家 同意 的 性 能 
指标 进行 测试 。 

测试 数据 最 好 和 真实 数据 相同 ,如 果 能 够 获得 真实 系统 运行 三 个 月 的 数据 ,就 可 以 在 
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此 基础 上 进行 性 能 测试 。 测 试 数据 最 重要 的 是 要 达到 真实 环境 运行 下 的 数据 量 级 。 

如 何 解决 “大 数据 量 测 试 需求 ,但 很 难 在 较 短 的 时 间 内 生成 大 量 业 务 数据 ?? 

(1) 可 以 借助 自动 化 测试 工具 , 利用 数据 库 测 试 数据 自动 生成 工具 , 例如 
TESTBytes ,确定 需要 生成 的 数据 类 型 ,通过 与 数据 库 的 连接 来 自动 生成 数 百 万 运行 正 
确 的 测试 数据 。 

(2) 利用 自动 化 负载 压力 测试 工具 ,模拟 用 户 业务 操作 ,同时 并 发 数 百 个 或 者 数 千 个 
用 户 生 成 相关 数据 ,并 且 测 试 工程 师 并 不 需要 清楚 地 知道 数据 表 与 表 之 间 的 关系 等 细节 
内 容 , 这 样 就 事半功倍 了 。 例 如 要 生成 订单 ,不 必 考 虑 订单 中 的 信息 在 数据 库 内 部 到 底 与 
哪些 表 有 关系 ,只 需要 简单 录制 一 个 用 户 生 成 订单 的 操作 ,然后 模拟 大 量 虚拟 用 户 生成 订 
单数 据 就 可 以 了 。 

(3) 还 可 以 针对 某 个 应 用 ,在 了 解 整个 数据 库 结构 的 基础 上 ,自主 开发 数据 生成 工 
具 , 也 可 以 利用 数据 库 本 身 提供 的 辅助 工具 来 生成 数据 。 


13.3.4 测试 策略 


制定 测试 策略 时 ,应 针对 用 户 的 需求 给 出 解决 对 策 , 即 采用 什么 样 的 方法 ,来 实现 用 
户 测试 的 目的 。 

对 于 一 个 特定 的 业务 系统 ,用 户 一 般 会 分 散在 一 天 的 各 个 时 间 段 进行 访问 。 在 不 同 
的 时 间 段 中 ,用 户 使 用 业务 系统 的 频率 不 同 , 而 系统 的 繁忙 程度 不 同 。 在 一 些 特定 的 条 件 
下 ,可 能 出 现 短 时 间 内 用 户 集中 访问 某 个 业务 系统 的 情况 。 例 如 对 于 公文 处 理 系统 而 言 ， 
可 能 就 存在 短 时 间 内 大 量 用 户 查看 并 办 理 某 条 公文 的 情况 。 在 进行 性 能 测试 时 ,应当 使 
用 "考虑 最 坏 情况 的 原则 ”, 也 就 是 应 当 在 用 户 使 用 业务 系统 最 频繁 ,对 系统 造成 最 大 压力 
的 情况 下 对 系统 的 功能 进行 测试 ,判断 各 功能 和 页 面 是 否 能 够 满足 性 能 的 要 求 , 系 统 的 响 
应 时 间 是 否 过 长 。 

另 一 方面 ,系统 性 能 的 验证 必须 做 到 “覆盖 全 面 >。 虽 然 系统 中 各 个 功能 的 使 用 频率 
并 不 相同 ,一些 功能 的 使 用 频率 相对 于 其 他 功能 来 说 比较 低 , 但 是 在 进行 性 能 测试 和 优化 
时 ,不 能 忽略 这 些 功 能 ,编制 测试 用 例 时 也 不 能 仅仅 选择 最 常用 功能 。 例 如 可 能 所 有 的 用 
户 都 会 访问 通知 列表 ,但 是 一 般 只 有 5% 的 用 户 会 使 用 通过 系统 设置 模块 查找 某 个 用 户 
的 信息 ;但 是 在 测试 时 ,并 不 能 因为 查看 用 户 信 息 功能 的 使 用 频率 相对 较 少 ,而 忽略 掉 这 
项 功能 的 测试 。 所 以 ,进行 系统 性 能 测试 时 ,对 于 不 同业 务 ,用户 的 访问 比例 应 该 做 一 个 
合理 分 配 。 

在 测试 策略 上 还 应 该 考虑 ,同一 个 系统 在 不 同 硬件 环境 下 的 性 能 表现 ,从 而 让 系统 在 
满足 需求 的 情况 下 ,硬件 配置 也 能 达到 一 个 最 佳 的 状态 。 过 分 地 增加 硬件 来 满足 需求 也 
是 一 种 浪费 ,况且 增加 硬件 设备 不 是 能 解决 所 有 性 能 问题 的 。 

通常 软件 系统 的 性 能 与 测试 要 素 ( 用 户 数 、 测 试 功能 .用 户 分 布 . 数 据 量 ,硬件 环境 、 软 
件 环境 ) 密 切 相关 。 对 同一 个 软件 系统 , 当 测 试 要 素 中 有 一 个 变化 时 ,其 性 能 表现 也 会 发 
生 显 著 的 变化 。 通 过 对 测试 要 素 的 值 或 变化 进行 组 合 ,来 达到 不 同 的 目的 ,如 相同 数据 量 
等 条 件 下 用 户 数 不 断 变化 ,来 验证 软件 系统 所 能 支持 的 并 发 数 。 
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不 同 的 测试 目的 ,对 应 的 测试 策略 不 同 , 采 用 的 性 能 测试 方法 或 类 型 也 不 同 。 

(1) 性 能 符合 性 验证 : 负载 测试 ,疲劳 强度 测试 ， 

(2) 性 能 能 力 验证 : 压力 测试 ,疲劳 强度 测试 ; 

(3) 性 能 调 优 : 负载 测试 ,疲劳 强度 测试 。 

负载 测试 主要 指 常规 的 性 能 测试 ,通过 模拟 生产 运行 的 业务 压力 和 使 用 场景 组 合 来 
测试 系统 的 性 能 是 否 满足 生产 要 求 。 各 测试 要 素 都 是 相对 固定 的 。 

压力 测试 是 对 系统 不 断 施 加 压力 的 测试 ,是 通过 确定 一 个 系统 的 瓶颈 或 者 不 能 接收 
用 户 请 求 的 性 能 点 ,来 获得 系统 能 提供 的 最 大 服务 级 别 的 测试 。 通 俗 地 讲 , 压 力 测试 是 为 
了 发 现在 什么 条 件 下 应 用 程序 的 性 能 会 变 得 不 可 接受 。 部 分 测试 要 素 是 变化 的 。 但 在 测 
试 前 ,需要 确定 性 能 不 可 接受 的 标准 。 

疲劳 强度 测试 通常 是 采用 系统 稳定 运行 情况 下 能 够 支持 的 最 大 并 发 用 户 数 或 者 日 常 
运行 用 户 数 ,持续 执行 一 段 时 间 业 务 ,通过 综合 分 析 业 务 执行 指标 和 资源 监控 来 确定 系统 
处 理 最 大 工作 量 强 度 性 能 的 过 程 。 测 试 要 素 相 对 固定 。 


13.3.5 人 力 与 时 间 安 排 


最 后 一 条 ,就 是 要 根据 项 目的 进度 要 求 以 及 规模 ,来 进行 人 力 与 时 间 的 安排 。 对 于 大 
型 的 性 能 测试 ,项 目前 期 的 需求 调研 ,环境 的 部 署 ,工具 的 选 购 或 开发 ,人 员 对 测试 工具 的 
学 习 与 使 用 ,性 能 测试 的 进行 ,后 期 数据 的 分 析 与 调 优 , 都 需要 人 员 安 排 。 有 的 时 候 可 能 
还 需要 系统 工程 师 、 数 据 库 工程 师 、 软 件 开 发 工程 师 、 网 络 工 程 师 以 及 性 能 测试 工程 师 共 
同 参与 配合 ,并 不 是 一 个 性 能 测试 人 员 就 可 以 全 部 完成 的 。 

如 何 把 控 性 能 测试 的 同步 进行 ,后 期 测试 数据 的 汇总 与 分 析 , 是 一 个 非常 复杂 的 过 
程 。 有些 大 规模 的 项 目 , 前 期 的 准备 工作 就 需要 几 个 月 的 时 间 。 因 此 对 于 大 项 目的 性 能 
测试 ,人 员 与 时 间 安 排 也 至 关 重要 。 


13.4 ”业务 流程 


通过 之 前 对 系统 进行 的 性 能 测试 需求 分 析 和 性 能 测试 计划 的 制订 ,已 经 了 解 到 系统 
所 需 的 数据 和 运行 环境 ,以 及 用 户 一 般 的 操作 习惯 。 接 下 来 就 可 以 对 系统 的 业务 流程 进 
行 分 析 、 录 制 了 。 


13.4.1 业务 流程 介绍 与 案例 打开 浏览 器 


打开 出 售 列表 


所 谓 业务 流程 ,就 是 在 一 个 应 用 内 有 一 组 用 户 的 操作 或 

者 一 组 步骤 执行 去 实现 一 个 任务 ,如 订 票 业务 ,修改 确认 等 。 

只 有 明确 了 系统 的 业务 流程 ,才能 模拟 出 真实 的 系统 使 用 情 

况 ,进而 找到 今后 可 能 发 生 的 缺陷 。 而 广阔 二 下 页 通史 稍 菇 
对 于 一 个 典型 的 拍卖 案例 而 言 , 业务 流程 如 图 13-2 
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所 示 。 
不 过 对 于 一 些 网 站 而 言 , 可 能 有 多 个 业务 流程 ,如 搜索 登录、 留言 等 。 


13.4.2 业务 流程 分 析 


在 确定 了 待 测试 系统 的 业务 流程 之 后 ,就 要 对 这 些 业 务 进 行 分 析 。 
首先 要 明确 业务 流程 中 用 户 的 操作 步骤 和 可 能 输入 的 数据 。 这 既 可 以 让 人 们 了 解 业 
务 操作 步骤 ,又 能 让 人 们 了 解 哪些 地 方 需要 使 用 动态 的 测试 数据 。 
如 表 13-4 所 示 的 是 一 般 系 统 中 普遍 都 有 的 登录 业务 。 这 张 表 展示 了 登录 的 每 一 个 
步 又。 同时 可 以 看 出 , 表 中 的 mercury 和 test 是 登录 业务 所 需 的 动态 测试 数据 。 
表 13-4 登录 业务 操作 流程 


登录 业务 操作 步骤 输 入 数据 
1. 浏览 登录 页 面 

2. 输入 用 户 名 和 密码 本 
3. 单 击 登录 按钮 

4. 等 待 确认 


性 能 测试 的 过 程 在 很 大 程度 上 依赖 于 根据 实际 操作 所 录制 的 脚本 。 虽 然 在 做 性 能 测 
试 的 时 候 要 兼顾 每 个 功能 模块 ,但 对 于 一 些 用 户 使 用 频率 较 低 ,访问 量 较 少 的 业务 ,是 没 
有 必要 全 部 录制 下 来 进行 大 规模 测试 的 。 

那么 什么 样 的 业务 是 需要 录制 的 ? 

(1) 核心 业务 。 

对 于 一 个 系统 而 言 ,核心 业务 是 必须 能 在 任何 情况 下 都 正常 运行 ,绝对 不 能 出 现 问题 
的 。 例 如 : 邮箱 系统 中 的 收发 邮件 业务 ,电子 商务 系统 中 的 交易 过 程 。 这 部 分 业务 对 性 
能 的 要 求 极 高 ,一 旦 出 现 问题 ,造成 的 损失 也 是 不 可 估量 的 。 

要 想 确定 系统 中 的 核心 业务 ,可 以 与 应 用 专家 、 产 品 经 理 、 管 理 组 等 相关 人 员 进 行 
沟通 。 

(2) 高 吞吐 量 的 业务 。 

用 户 访问 量 在 系统 中 并 不 是 均匀 分 布 的 。 类 似 访问 主页 搜索 以 及 用 户 登 录 这 样 的 
业务 在 一 个 系统 的 总 业务 量 中 可 以 占 到 90% 其 至 以 上 的 比例 。 这 部 分 业务 也 是 性 能 测 
试 的 重点 。 如 果 系 统 中 最 常用 的 业务 都 无 法 保证 高 负载 下 的 正常 运转 ,那么 用 户 也 许 就 
会 放弃 使 用 该 系统 ,从 而 造成 巨大 的 损失 。 

(3) 包含 动态 内 容 的 业务 。 

包含 动态 内 容 的 业务 在 性 能 测试 中 也 是 需要 录制 下 来 的 。 例 如 ,在 一 些 系 统 的 订单 
确认 、 密 码 修改 、 账 号 激活 以 及 登录 等 业务 中 ,都 会 由 系统 自动 生成 动态 的 确认 号 或 验证 
码 。 此 外 ,根据 用 户 的 操作 和 权限 ,系统 也 会 生成 动态 页 面 。 包 括 音频 、 视 频 这 些 流 媒体 
的 播放 ,都 属于 包含 动态 内 容 的 业务 。 
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表 13-5 是 对 一 个 具体 的 订 票 系统 的 业务 流程 的 分 析 。 


性 能 测试 需求 


表 13-5 订 票 业务 流程 分 析 

正常 时 段 高 峰 时 段 包含 的 动 村 是 否 需 要 
业务 流程 名 | 。 香 吐 量 春 吐 量 态 数据 量 下 录制 
登录 70/hr 210/hr 少量 非常 核心 必须 录制 
创建 新 账号 10/hr 15/hr 中 等 不 太 核 心 可 选 录 制 
搜索 飞机 票 130/hr 180/hr 中 等 中 等 可 选 录制 
查看 订单 20/hr 30/hr 中 等 非常 核心 必须 录制 
订 票 40/hr 90/hr 大 量 非常 核心 必须 录制 
13.5 步骤 测量 


在 业务 流程 中 ,对 于 不 同类 型 的 业务 ,用户 可 能 有 不 同 的 预期 响应 时 间 和 不 可 接受 的 
响应 时 间 , 如 表 13-6 所 示 。 这 些 时 间 可 以 通过 与 应 用 专家 和 管理 组 的 沟通 得 到 。 


表 13-6 ”预期 时 间 和 不 可 接受 的 响应 时 间 


业务 流程 预期 时 间 不 可 接受 的 响应 时 间 
查看 机 票 订 单 8 一 12s 20s 
搜索 航班 6 一 8s 12s 
订 票 12 一 20s 30s 
但 是 实际 录制 业务 流程 的 时 候 ,有 些 业务 并 不 适合 ,或 ET 
者 根本 无 法 单独 录制 ,必须 与 其 他 业务 一 起 。 如 图 13-3 所 
示 是 一 个 完整 的 航空 公司 订 票 业务 流程 。 输入 用 户 名 和 密码 
很 显然 ,其 中 的 订 票 流程 必须 在 已 登录 的 情况 下 才 有 
能 完成 。 也 就 是 说 ,在 录制 订 票 业务 时 ,必然 会 将 登录 业 
务 也 录制 进来 。 这 种 情况 非常 普遍 ,例如 用 户 查 看 个 人 等 待 系统 确认 
信息 ,收发 邮件 、 网 上 交易 等 。 这 就 带 来 了 一 个 问题 如 二 
果 想 从 业务 流程 中 获取 登录 的 响应 时 间 , 或 是 获取 提交 1 
订单 的 响应 时 间 , 要 如 何 做 呢 ? 输入 日 期 
在 这 里 ,引入 “事务 "这 一 概念 所谓" 事务 ", 就 是 在 ee 
业务 流程 中 衡量 一 个 或 者 多 个 步骤 的 执行 时 间 的 方法 ， 
通过 事务 来 测量 业务 流程 中 步骤 耗费 的 时 间 。 单 击 提交 


在 图 13-3 中 ,如 果 想 获取 登录 的 响应 时 间 , 可 以 将 
“ 单 击 登录 按钮 "和 “等 待 系统 确认 ” 当 作 一 个 业务 ,也 就 
是 从 单 击 按钮 直到 页 面 显 示 登 录 成 功 的 页 面 。 这 样 就 可 


图 13-3 一 个 完整 的 航空 公司 
订 票 业务 流程 
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以 准确 地 得 到 登录 的 响应 时 间 。 
13.6 ”本章 小 结 


本 章 介绍 了 性 能 测试 中 需求 分 析 的 过 程 。 性 能 测试 需求 要 保证 所 有 确定 的 性 能 测试 
需求 内 容 都 是 可 以 用 某 种 方法 来 明确 判断 是 否 符合 软件 需求 文档 或 其 他 重要 文档 中 的 描 
述 的 。 性 能 测试 需求 分 析 是 性 能 测试 的 先决 条 件 , 也 将 耗费 测试 人 员 大 量 的 时 间 。 所 以 ， 
一 定 要 重视 性 能 测试 需求 分 析 , 精 准 把 握 测 试 所 需 内 容 、 条 件 , 为 性 能 测试 的 成 功 打 下 坚 
实 的 根基 。 
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第 14 章 测试 脚本 编写 


在 整个 性 能 测试 的 过 程 中 ,测试 脚本 的 编写 无 疑 是 十 分 重要 的 一 环 。 因 为 只 有 通过 
测试 脚本 的 实际 运行 ,才能 实现 先前 制订 的 测试 方案 ,才能 对 整个 被 测 系统 的 状况 有 一 个 
全 面 而 深入 的 了 解 。 可 以 说 ,测试 脚本 编写 的 好 坏 程 度 直接 关系 到 测试 结果 的 准确 性 ,以 
及 测试 过 程 的 执行 效率 。 

LoadRunner 生成 脚本 的 方式 有 两 种 ,一 种 是 自己 编写 手动 添加 或 苦 入 源 代 码 ; 一 种 
是 通过 LoadRunner 提供 的 录制 功能 ,运行 程序 自动 录制 生成 脚本 。 这 两 种 方式 各 有 利 
弊 , 但 首选 还 是 录制 生成 脚本 ,因为 它 简单 且 智能 化 ,对 于 测试 初学 者 来 说 更 加 容易 操作 。 
但 是 仅 靠 着 自动 录制 脚本 ,可 能 无 法 满足 用 户 的 复杂 要 求 , 这 就 需要 手工 添加 函数 ,进行 
必要 的 手动 关联 或 在 函数 中 进行 参数 化 来 配合 ,增强 脚本 的 实用 性 。 手 写 添加 增强 脚本 
的 独特 之 处 在 于 : 

(1) 可 读 性 好 ,流程 清晰 ,检查 点 截取 含义 明确 。 业 务 级 的 代码 读 起 来 总 比 协议 级 代 
码 更 容易 让 人 理解 ,也 更 容易 维护 , 而 且 必 要 时 可 建立 一 个 脚本 库 。 而 录制 生成 的 代码 
大 多 没有 维护 的 价值 , 现 炒 现 卖 。 

(2) 手写 脚本 比 录 制 脚本 更 能 真实 地 模拟 应 用 运行 。 因 为 录制 的 脚本 是 截获 了 网 络 
包 , 生 成 的 协议 级 代码 ,而 略 掉 了 客户 端的 处 理 逻 辑 。 

(3) 手写 脚本 比 录 制 脚本 更 能 提高 测试 人 员 的 技术 水 平 。LoadRunner 提供 了 Java 
user、VB user、C user 等 语言 类 型 的 脚本 ,允许 用 户 根据 不 同 的 测试 要 求 自 定义 开发 各 种 
语言 类 型 的 测试 脚本 。 

增强 脚本 的 好 坏 关 系 到 这 个 脚本 是 否 能 在 实际 运行 环境 中 更 真实 地 进行 模拟 操作 。 

至 于 具体 使 用 哪 种 方式 来 生成 脚本 ,还 应 该 以 脚本 模拟 程序 的 真实 有 效 为 准 。 例 如 ， 
有 些 程序 只 需要 执行 迭代 多 次 操作 ,没有 特殊 要 求 ,选择 自 动 生成 的 脚本 就 可 以 了 ;有 些 
程序 需要 加 入 参数 化 方 可 满足 用 户 的 要 求 , 此 时 应 该 使 用 增强 的 手工 脚本 。 再 就 是 结合 
项 目 进度 、 开 发 难 易 程度 等 因素 考虑 。 

本 章 将 以 LoadRunner 为 例 ,从 参数 化 脚本 ,手工 关联 ,自动 关联 ,日 志高 级 应 用 ,以 
及 高 级 脚本 技术 几 个 方面 来 阐述 测试 脚本 的 编写 方法 和 注意 事项 。 


14.1 参数 化 脚本 
14.1.1 参数 化 的 目的 
参数 化 脚本 和 非 参数 化 脚本 的 区 别 在 于 ,如 图 14-1 所 示 , 非 参数 化 的 录制 脚本 每 次 运 


行 是 一 个 硬 编码 的 脚本 ,其 对 系统 的 输入 是 固定 的 ,如 图 例 , 每 次 仅 能 选择 固定 的 San 
Francisco。 而 参数 化 脚本 则 可 以 动态 地 选择 输入 参数 ,如 图 例 , 每 次 都 可 以 选择 任意 的 城市 。 
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ty 4 


> 


是 一 个 hard coded 的 脚本 


[参数 化 肢 本 “] [一 > 


行将 可 以 使 用 不 同 的 城市 


图 14-1 非 参数 化 录制 脚本 和 参数 化 脚本 


参数 化 有 两 个 目的 ,其 一 是 避免 缓存 问题 ,缓存 会 造成 响应 的 时 间 不 一 致 ,其 二 是 要 
模拟 真实 用 户 的 使 用 情况 。 

如 图 14-2 所 示 ,真实 的 用 户 在 会 在 应 用 中 使 用 不 同 的 数据 ,而 简单 录制 的 脚本 (虚拟 
用 户 ) 则 是 一 个 静态 数据 脚本 。 


REAL USERS 


交 


Recorded 
script 
[MAL TS 


图 14-2 实际 用 户 和 录制 脚本 (虚拟 用 户 ) 


在 实际 使 用 的 被 测 系统 中 ,往往 会 用 缓存 来 提升 系统 的 响应 时 间 。 如 果 不 进行 参数 
化 ,那么 对 单一 的 静态 数据 的 访问 ,必然 会 被 系统 置 于 缓存 中 ,那么 后 续 的 访问 将 几乎 永 
远 可 以 直接 从 系统 缓存 中 得 到 想 要 的 结果 ,而 实际 上 ,缓存 是 有 限 的 ,如 果 大 规模 的 真实 
用 户 访问 系统 ,其 需求 的 结果 必然 不 能 完全 通过 缓存 中 的 数据 来 满足 。 这 样 的 情况 下 ,如 
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果 不 对 系统 进行 参数 化 ,将 使 得 系统 的 响应 速度 远 远 快 于 实际 使 用 中 的 表现 ,这 样 的 结果 
显然 不 是 人 们 想 要 的 。 另 外 ,真实 用 户 的 操作 往往 带 有 很 大 的 随意 性 ,有 些 用 户 对 系统 熟 
悉 , 则 其 操作 可 能 较为 迅速 ,另外 一 些 则 有 可 能 较为 缓慢 ;每 一 个 用 户 进行 违法 操作 的 概 
率 也 不 尽 相 同 , 等 等 。 这 些 都 使 得 简单 的 非 参 数 化 脚本 ,不 能 很 好 地 模拟 真实 用 户 的 
行为 。 

因此 ,要 对 脚本 进行 参数 化 ,其 一 是 避免 缓存 问题 ,因为 缓存 会 造成 响应 时 间 不 一 致 ， 
其 二 是 要 模拟 真实 用 户 的 使 用 情况 。 实 际 上 第 一 点 也 可 以 包含 在 第 二 点 中 。 最 根本 的 目 
的 就 是 要 模拟 真实 用 户 的 使 用 情况 ,以 尽 可 能 估算 出 系统 的 实际 性 能 表现 。 


14.1.2 什么 时 候 进行 参数 化 


说 完 参数 化 脚本 的 目的 ,现在 结合 如 图 14-3 所 示 的 购 票 过 程 来 谈 谈 什 么 时 候 进行 参 
数 化 ,以 及 为 什么 要 在 这 些 时 候 进行 参数 化 。 


什么 时 候 进 行 参数 化 


数据 缓存 


图 14-3” 购 票 过 程 


如 图 14-3 所 示 , 在 STEP2 输入 用 户 名 和 密码 ,STEP5 选择 离开 和 到 达 城 市 ,STEP6 
输入 日 期 时 ,需要 进行 参数 化 。 

具体 来 说 ,会 在 具有 唯一 约束 ,有 数据 依赖 ,有 数据 缓存 或 者 有 日 期 约束 的 时 候 进 行 
参数 化 。 

以 上 图 中 的 购 票 过 程 为 例 ,STEP2 中 输入 的 用 户 名 具有 唯一 性 ,其 在 不 同 的 实际 用 
户 间 肯 定 是 不 同 的 ,因此 也 只 能 被 一 个 虚拟 用 户 所 使 用 ,所 以 需要 对 其 进行 参数 化 。 同 是 
在 这 一 步 ,用 户 的 密码 是 依赖 于 用 户 名 的 ,两 者 存在 数据 依赖 关系 ,因此 不 可 能 用 固定 的 
数据 或 者 虽 不 固定 实际 上 却 和 用 户 名 不 相关 的 数据 进行 测试 ,而 必须 进行 参数 化 。 

在 STEP5 选择 离开 和 到 达 的 城市 时 ,因为 存在 如 图 14-4 所 示 的 缓存 情况 ,在 不 进行 
参数 化 的 情况 下 会 导致 系统 测试 的 响应 速度 快 于 系统 实际 的 相应 速度 ,因此 ,需要 对 其 进 
行 参数 化 。 如 图 14-4 所 示 ,上方 不 参数 化 的 脚本 其 平均 响应 时 间 仅 为 2. 5s, 而 参数 化 的 
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脚本 的 平均 响应 时 间 却 是 4. 6s。 因 此 参数 化 无 疑 更 加 符合 用 户 实际 的 使 用 情况 。 


不 参数 化 的 脚本 
Average seek time - 2.55 


参数 化 的 脚本 
Average seek time - 4.65 


图 14-4 存在 数据 缓存 的 情况 


在 STEP6 输入 离开 的 日 期 时 ,所 输入 的 日 期 仅 能 是 当前 或 者 当前 日 期 以 后 ,而 不 能 
是 当前 日 期 之 前 。 因 此 必须 按照 这 一 规则 对 其 进行 参数 化 。 

因为 只 有 在 这 些 时 候 进 行 参数 化 , 方 能 保证 虚拟 用 户 能 和 实际 用 户 的 操作 方式 最 大 
限度 地 吻合 ,因此 需要 在 具有 唯一 约束 ,有 数据 依赖 ,有 数据 缓存 或 者 有 日 期 约束 的 时 候 
进行 参数 化 。 


14.1.3 怎样 参数 化 输入 数据 


前 面 讲 了 参数 化 的 目的 和 什么 时 候 进行 参数 化 ,现在 说 一 说 该 怎样 参数 化 输入 数据 
这 个 问题 ,一 般 采 取 以 下 的 步骤 : 

(1) 决定 哪些 字段 需要 参数 化 。 

(2) 用 参数 化 值 代替 原 有 的 值 。 

(3) 决定 参数 类 型 。 

(4) 创建 数据 文件 。 

(5) 选择 数据 访问 方式 以 及 运行 类 型 。 

(6) 运行 脚本 并 且 检 验 参 数 设 置 的 正确 性 。 

关于 哪些 字段 需要 参数 化 的 问题 ,已 经 在 14. 1. 2 节 中 详细 交代 ,此 处 不 作 著 述 。 在 
确定 了 需要 参数 化 的 字段 以 后 ,要 用 参数 化 值 代替 原 有 的 值 。 接 着 需要 决定 参数 的 类 型 。 
常用 的 数据 类 型 如 表 14-1 所 示 。 
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表 14-1 常用 的 数据 类 型 


参数 类 型 说 明 
Date/Time 在 需要 输入 日 期 .时 间 的 地 方 ,可 以 用 Date/Time 来 代替 ,可 以 选择 日 期 格 
式 , 也 可 进行 定制 
ie 该 类 型 的 参数 用 执行 脚本 的 VU 所 属 组 的 名 称 来 替代 。 但 是 在 VuGen 中 运 
行 时 ,该 值 为 None 


LoadGenerator Name | LoadRunner 使 用 该 虚拟 用 户 所 在 的 Load Generator 机 器 名 来 代替 参数 
Iteration Number LoadRunner 使 用 该 测试 脚本 当前 循环 的 次 数 来 代替 参数 
Random Number 随机 数 , 可 以 设置 产生 随机 数 的 范围 


Unique Number 唯一 值 来 代替 参数 


LoadRunner 使 用 该 虚拟 用 户 的 ID 来 代替 参数 值 ,该 ID 是 由 Controller 来 控 
制 的 ,在 VuGen 中 运行 脚本 时 ,该 值 为 一 1 


File/Table 可 以 在 属性 设置 中 编辑 文件 ,添加 内 容 , 也 可 以 从 数据 库 中 提取 数据 
UseDefinedFunction 从 dll 的 简单 函数 中 获取 信息 替代 参数 


Vuser ID 


当 参 数 类 型 为 File 时 还 需要 同时 创建 数据 文件 并 指明 数据 源 。 参 数 的 数据 来 源 通 
常 有 三 种 : 主 数据 , 自 定义 用 户 数 据 以 及 动态 数据 。 其 中 主 数据 来 源 于 各 种 被 测 系统 内 
的 数据 库 , 例 如 存在 的 用 户 名 或 者 密码 以 及 相关 的 业务 数据 。 自 定义 用 户 数据 主要 是 一 
些 用 户 的 标识 ,例如 用 户 的 传真 号 .Email 地 址 。 动 态 数 据 主要 是 应 用 执行 之 前 根本 无 法 
预知 的 数据 。 

再 下 一 步 , 选 择 数 据 访问 方式 以 及 运行 类 型 。LoadRunner 中 数据 访问 方式 有 以 下 
几 种 :Sequential,Random, Unique,Same line as 一 parameter 二 。 

对 于 Sequential 方式 ,如 表 14-2 所 示 ,每 个 用 户 都 是 从 同一 行 开始 执行 的 。 第 一 次 
循环 执行 第 一 行 ,第 二 次 循环 执行 第 二 行 。 

表 14-2 ”Sequential 方式 


Sequent Vuserl Vuser2 Vuser3 
Iteration1 Acapulco Acapulco Acapulco 
Tteration2 London London London 
Tteration3 New York New York New York 


对 于 Random 方式 ,如 表 14-3 所 示 ,每 次 循环 则 随机 获取 参数 ,不 保证 数据 唯一 性 。 


表 14-3 Random 方法 


Sequent Vuserl Vuser2 Vuser3 
Iteration1 Paris Seattle London 
Tteration2 London NewYork Zurich 
Tteration3 Acapulco Portland Sydney 
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对 于 Unique(by Row) 的 方式 ,如 表 14-4 所 示 ,每 个 用 户 都 有 自己 的 数据 运行 块 , 测 
试 人 员 必 须 保 证 数据 能 够 满足 运行 次 数 ,以 及 数据 的 唯一 性 。 


表 14-4 Unique 方式 


Sequent Vuserl Vuser2 Vuser3 
Iteration1 Acapulco Paris Seattle 
Iteration2 London Portland Sydney 
Tteration3 NewYork San Francisco Zurich 


对 于 Same Line as 二 parameter 祖 方式 ,如 表 14-5 所 示 ,主要 解决 数据 的 依赖 性 问题 ， 
例如 : 用 户 名 取 为 jojo 时 ,密码 就 必须 是 bean。 


表 14-5 Same Line as 一 parameter 二 方式 


Vuser UserName Password 
Vuserl jojo bean 
Vuser2 jno Tean 
Vuser3 roro bow 


最 后 可 以 在 runtime Setting 中 告诉 参数 池 参 数 的 执行 次 数 ,并 选择 Extended Log 
的 参数 输出 属性 来 检查 参数 的 正确 性 。 


14.2 手工 关联 和 自动 关联 


当 录 制 脚 本 时 ,VuGen 会 拦截 Client 端 ( 浏 览 器 ) 与 Server 端 (网 站 服务 器 ) 之 间 的 对 
话 , 并 全 部 记录 下 来 ,产生 脚本 。 

当 执 行 脚本 时 ,可 以 把 VuGen 想象 成 一 个 演员 , 它 伪 装 成 浏览 器 ,然后 根据 脚本 ,把 
当初 真 的 浏览 器 所 说 过 的 话 , 再 对 网 站 向 服务 器 重新 说 一 遍 , 企 图 骗 过 服务 器 ,让 服务 器 
把 网 站 内 容 传 送 给 VuGen。 

记录 在 脚本 中 要 跟 服务 器 所 说 的 话 , 完 全 与 当初 录制 时 所 说 的 一 样 。 这 样 的 做 法 在 
遇 到 有 些 服务 器 时 还 是 会 失效 的 。 这 时 就 需要 关联 的 做 法 骗 过 服务 器 。 

所 谓 关 联 就 是 要 把 脚本 中 某 些 写 死 的 数据 ,转变 成 括 取 自 服务 器 所 送 的 、 动 态 的 、 每 
次 都 不 一 样 的 数据 。 

以 常见 的 登录 系统 为 例 。 如 图 14-5 所 示 ,在 登录 后 服务 器 会 返回 SessionID, 登 录 后 
的 操作 都 必须 要 提交 该 ID 确认 身份 。 使 用 VuGen 录制 时 ,将 会 记录 服务 返回 的 
SessionID ,并 据 此 来 进行 下 面 的 若干 个 请 求 。 

待 回放 时 ,如 图 14-6 所 示 ,服务 器 会 接收 用 户 名 和 密码 后 返回 一 个 新 的 SessionID， 
而 脚本 依然 发 送 旧 的 SessionID 给 服务 器 ,最 终 因 旧 的 SessionID 已 经 失效 造成 脚本 运行 
错误 。 因 此 要 采用 脚本 关联 机 制 , 将 原来 固定 的 SessionID 具体 值 用 一 session_id 二 参数 
代替 ,每 次 动态 地 获取 相应 的 SessionID 值 .这 样 即 可 解决 这 一 问题 。 
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录制 过 程 中 产生 的 动态 数据 


VuGen Script 


(SessionlID@@@12345 ) 


图 14-5 录制 过 程 中 产生 的 动态 数据 


回放 时 动态 数据 导致 的 问题 


VuGen Script 


图 14-6 回放 过 程 中 动态 数据 导致 的 问题 


关联 又 分 为 手工 关联 和 自动 关联 。 

对 于 LoadRunner 中 的 手工 关联 ,其 步骤 如 下 : 

(1) 在 runtime setting 中 设置 Data returned by server 并 回放 脚本 检查 脚本 ,确定 哪 
些 脚本 是 因为 关联 问题 导致 失败 的 。 

(2) 确定 哪些 数据 需要 关联 。 

(3) 找 出 动态 数据 的 左右 边界 值 以 及 出 现 的 位 置 。 

(4) 在 脚本 中 添加 web_reg_save_param 函数 。 

(5) 在 参数 化 脚本 中 的 动态 值 。 
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(6) 校 验 动态 关联 的 正确 性 。 
第 (1) 步 执行 后 .LoadRunner 将 能 输出 Server 与 Client 的 所 有 交互 数据 。 接 着 需要 
回放 脚本 。 首 先 查 看 哪 步 失败 了 ,如 图 14-7 所 示 。 


Step Name: Submit Form: 
com.mercurytours.servlet.Itenerar 


Step Failed 


Submit Form 
com mercurytours.servlet IteneraryServlet 


图 14-7 ”检查 失败 的 步骤 


然后 要 查看 执行 日 志 挖掘 问题 ,如 图 14-8 所 示 。 


ETXTKTTITTT pre ack web (HTTP/HTMD] 


| He 上 Vow Ineert Vser artions Toos Wndow Hap lelx| 


19:|B:|B|| Oar MP SDN DD 
| 回 铺 咖 | 加 固 四 || 总 Fedcoreions 国 ParanUist 内 Runumesetgs | 


correlation_playback - Web IHTTPIHTMU 
DB vst lr_think_time( 11 ); 习 
@ Acton 


vueer_end web_submit_form( "com.mercurytours.servlet.IteneraryServlet") 
"Snapshot=t7.1nf", 

ITEMDATA, 
"Name"flight_ e=<OFF>", ENDITEM, 
"Nameeflight_ =<OFF>", ENDITEM, 
"Name-flight_ \ ,ENDITEM, 
"Name "removeSelected .x alue-80", ENDITEM, 
"Name“removeSelected.y", "Value=10", ENDITEM, 

ST); 


: 3 ') was successful，619545 body bytes, 1367 hi 
Action.c(95): web_submit_form("com.mercurytours.servlet.IteneraryServlet") higl 
Ending action Action. 


Ending Vuser... s 
» 


TE [rr ERNEGL 
图 14-8 ”执行 日 志 发 现 问题 


执行 日 志 中 表现 为 requested form was not found ,在 脚本 中 发 现 相 关 的 测试 行 , 原 来 
是 delete itineray 信息 没有 找到 。 

接着 要 决定 哪些 参数 需要 关联 ,此 时 可 借用 Wdiff 找 出 两 次 脚本 的 不 同 ,帮助 完成 这 
一 步 。 

在 如 图 14-9 所 示 的 航班 订 票 系统 中 , 方 框 中 标记 的 值 表 示 鼠 标 在 屏幕 中 的 位 置 ,这 
些 值 在 脚本 中 会 被 使 用 ,但 不 需要 关联 ;延迟 时 间 也 在 脚本 中 会 被 使 用 ,也 不 需要 关联 , 需 
要 关联 的 就 是 航班 号 ,因为 其 是 动态 的 ,需要 关联 。 

由 此 可 以 看 出 需要 关联 的 内 容 有 两 个 特征 。 
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‘CName=buyFights.xNs, ‘CValue-52Nt,! CName=buyFlights.xNa, CValuel=23N|,ENDITEM, 
CName=buyFights.yNe, CValue=15Nb, CName=buyFlights.xNa, ‘CValue=17NE,ENDITEM, 


Ir_think_time(2); Ir_think_time(1); 


Ir_think_time(7); Ir_think_time(11); 


© O00 


a, CValue=onNa,ENDITEM, Chamesfleht_206Ns, CValue-onNe ENDITEM, 
‘CName=thyFights.xNs, ‘CValue|101N,ENDITEM, CName=buyFIl ,ENDITEM, 
‘CName=thuyFights.yNs, ‘CValue|13Ne|ENDITEM, ‘CName=buyFlights xNa, CVa ,ENDITEM, 

Ir_think_time 
动态 的 飞机 票 号 需要 关联 te © (9) 


14-9 哪些 值 需要 关联 


(1) 第 一 个 特征 : 该 动态 内 容 一 定 首先 是 从 服务 器 端 产生 并 返回 给 客户 端的 。 
(2) 第 二 个 特征 : 该 客户 端 在 得 到 该 动态 内 容 后 一 定 会 把 它 重新 发 送 到 服务 器 端 。 
只 要 满足 这 两 个 特征 就 需要 对 其 进行 关联 。 
再 然后 ,需要 找 出 动态 数据 的 左右 边界 值 以 及 出 现 位置 , 其 具体 位 置 包含 : 在 什么 文 
件 下 ,在 第 几 个 左右 边界 值 之 后 ,如 图 14-10 所 示 。 


| Ee 如 Wow leet Wser Brtons Iocks Wndow Heb 
| 号 -| 七 :| EB| @ 2atrend IE 


全 右 | 夯 贺 加 | 总 Fedcorelosons 国 Paramtst 由 Ruranesetnos 


correlation_playback - Web [HTTPIHTMU) 


Action = | pace view | [Sorver Responee | ChertRequest | 

Action(] Snapshot of Recording 
Ltt com mereurytours serviet Walcom | = fy Re < 
Subm Fom cmmeouyouxteve| 多 加 Pr 习 
Submi Fom com merouytours sae | 。 中国 By < 
Submi Fom com mercuytours servle 司 多 15Unlka|span-"z” bgcolor="#CCCccc"><t 人 Oe tace="ARIAL, EEL 
Submit Fom com mercuytours sarvle 1 Form |e></font></b></font></font> 
Image Mineray 

中 Submi Fom com merouours serle 

Image: sion-olf DO 


nc /fon /p> /Eo: 


mn. nercurytours. servle | 
» 


Ou! Dody DYteS, 


Was Successtul, 


ction.c(95): web_submit_form("com.mercurytours.servlet.IteneraryServlet") hig] 
nding action Action. 


nding Vuser... 


图 14-10 动态 数据 的 边界 值 及 其 位 置 


需要 将 这 些 信息 放 入 web_reg_save_param 函数 中 ,该 函数 的 具体 参数 及 其 意义 
图 14-11 所 示 。 
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web_reg_save param Function 参数 


图 14-11 web_reg_save_param 函数 的 参数 意义 


最 后 将 web_reg_save_param 函数 加 入 脚本 中 去 ,并 校 验 执行 结果 即 可 。 

对 于 自动 关联 ,其 原理 在 于 ,自动 关联 是 VuGen 提供 的 自动 扫描 关联 处 理 策略 , 它 的 
原理 是 对 同一 个 脚本 运行 和 录制 时 的 服务 器 的 返回 进行 比较 ,来 自动 查找 变化 部 分 ,并 且 
提示 是 否 生成 不 关联 。 

在 LoadRunner 中 可 以 先 运 行 脚本 一 次 ,然后 借用 Vuser 菜单 中 的 Scan Script for 
Correlations 选项 以 及 Correlate 按钮 ,来 实现 动态 关联 ,此 处 不 再 袭 述 。 


14.3 日 志高 级 应 用 


当 编 译 或 者 运行 测试 脚本 时 ,难免 会 发 生 失败 的 情况 。 此 时 就 要 检查 一 下 ,在 运行 过 
程 中 输入 的 数据 是 什么 ?在 运行 过 程 中 动态 数据 出 现 了 什么 问题 ? 日 志 无 疑 是 人 们 解决 
这 些 问 题 所 必须 要 使 用 的 功能 ,但 是 简单 的 日 志 功 能 又 有 可 能 不 能 完全 满足 人 们 的 需要 ， 
此 时 ,日 志高 级 应 用 就 显得 十 分 必要 了 。 日 志高 级 应 用 的 目的 就 在 于 从 客户 化 的 日 志 信 
息 中 挖掘 执行 中 的 错误 。 

一 般 来 说 ,加 高 级 日 志 的 步骤 如 下 : 

(1) 初始 化 变量 并 设置 为 0。 

(2) 根据 check point 函数 的 savecount 属性 保存 匹配 的 值 。 

(3) 把 值 保存 到 变量 中 。 

(4) 校 验 变量 值 。 

(5) 如 果 值 为 0, 将 错误 结果 输入 执行 日 志 或 者 Controller 的 output windows 中 。 

(6) 使 用 lr_eval_string 和 lr_error_message 去 写 日 志 。 

(7) 通过 return 函数 去 控制 脚本 运行 。 

下 面 以 一 个 实际 的 Action 来 演示 这 一 过 程 : 
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第 三 步 : 
WEb Submit form("com.mercurytours.servlet.PurchaseServlet 2 


第 四 步 : 。 itinerary reserved- atoi (lr eval string("{booked count}")); 
第 五 步 : if (itinerary reserved > 0) 


第 六 步 : 1r_output message 
("Sd itinerary/itineraries reserved.", itinerary reserved); 
else 


{ 
第 七 步 : lr error message ("No reservations made."); 
1r_end transacticn ("purchase ticket",IR FAITD); 


第 八 步 : retum 0; 
} 
1r_end transacticn ("puchase ticket",IR AUIO); 


结合 上 述 脚 本 ,人 们 可 以 知道 。 在 第 一 步 时 ,初始 化 变量 并 设置 值 为 0。 然 后 在 第 二 
步 通过 web_reg_find 保存 变量 ,根据 check point 函数 的 savecount 属性 保存 了 匹配 的 
值 。 那 么 变量 的 含义 是 什么 呢 ? 对 于 booked_count 值 有 两 种 情况 : 如 果 其 期 望 值 等 于 
实际 值 , 此 处 即 为 booked_count 为 1 或 者 大 于 0, 则 结果 通过 ;和 否则 ,结果 失败 。 也 就 是 
说 ,bookeed_count 的 值 表 示 结 果 的 成 败 。 

既然 ,booked_count 变量 值 代表 了 结果 的 成 败 ,那么 可 以 看 到 , 仅 在 第 三 步 时 ， 
booked_count 的 值 才 会 改变 。 要 想 取得 当前 booked_count 的 值 ,就 要 利用 第 四 步 中 的 
操作 ,其 中 lr_eval_string("{parameter_name)") 函 数 ,可 以 获取 当前 值 ,而 atoi() 函 数 能 
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将 lr_eval_string() 函 数 获得 的 字符 串 值 转变 为 整 型 。 这 样 就 可 以 将 整 型 化 的 booked_ 
count 值 赋 给 最 开始 定义 的 整 型 变量 itinerary_reserved 了 。 

在 第 五 步 ,会 对 itinerary_reserved 的 值 进 行 校 验 , 如 果 其 大 于 0, 那么 说 明 结 果 通 过 ， 
则 执行 第 六 步 ,可 借用 lr_output_message() 函 数 向 输出 日 志 发 送 通 过 信息 。 否 者 ,执行 
第 七 步 ,借用 lr_error_message() 函 数 向 日 志 发 送 错 误 信息 。 

最 后 可 以 用 return(value) 函数 停止 脚本 的 运行 。 其 中 ,value 为 0 代表 停止 当前 运 
行 ,为 一 1 代表 停止 脚本 。 

上 述 脚 本 中 的 黑体 字 部 分 指明 了 购 票 事务 开始 ,失败 ,以 及 结束 的 位 置 。 

通过 上 述 方法 ,就 可 以 利用 日 志 的 高 级 应 用 功能 ,自己 定义 关心 的 日 志 内 容 , 这 对 测 
试 过 程 无 疑 是 十 分 有 利 的 。 


14.4 高 级 脚本 技术 


在 LoadRunner 中 高 级 脚本 技术 有 很 多 种 ,本 节 仅 以 如 何 将 编写 的 动态 链接 库 在 
LoadRunner 中 调用 和 如 何 利 用 LR 编写 FTP 脚本 两 个 知识 点 来 向 读者 初步 展示 其 强大 
的 功能 。 


14.4.1 如 何 将 编写 的 动态 链接 库 嵌 入 LR 中 运行 


完成 动态 链接 库 开发 后 ,动态 链接 库 如 何 被 LoadRunner 进行 调用 呢 ? 其 实 也 是 很 
简单 的 。 在 LoadRunner 中 的 DLL 调用 有 局 部 调用 与 全 局 调用 ,下 面 介绍 局 部 调用 。 首 
先 把 编译 的 DLL 放 在 脚本 路 径 下 面 , 假 设 为 MyDll. dll, MyDIll lib. 然后 在 Action 中 使 
用 1r_load_dll("MYD1. dll") ,此 函数 可 以 把 DLL 加 载 进来 ,调用 DLL 里 面 的 函数 ,而 
DLL 中 的 运算 是 编译 级 的 ,所 以 效率 极 高 。 

全 局 的 动态 链接 库 的 调用 则 需要 修改 mdrv. dat, 路 径 在 LoadRunner 的 安装 目录 下 
(LoadRunner/dat directory) ;在 里 面 修改 如 下 : 

[winsock] 

ExtPriorityType= Protocol 

WINNT EXT LIBS=wsrun32.d11 

WIN95 EXT LIBS=wsrun32.d11 

LINUX ET LIBS= liblrs.so 

SOLARIS EXT LIBS= liblrs.so 

HEUX PT LIBS- liblrs.sl 

AIX EXT LIBS= liblrs.so 

IibcfgFunc= winsock exten oonf 

UtilityExt= lrun api 

ExtMessageoueue= 0 

Extcmarineoverwrite= — WinInet No 

ExtcmaLineconc= -UsingminTnet No 
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WINNT DLLS= user dl11.dll，user dll2.dll, .. 

/最 后 一 行 是 加 载 需要 的 HL 

这 样 就 可 以 在 LR 中 随意 调用 程序 员 编 写 的 API 函数 ,进行 一 些 复杂 的 数据 加 密 , 准 
备 一 些 操作 ,进行 复杂 的 测试 。 同 时 如 果 有 大 量 高 复杂 的 运算 也 可 以 放 在 DLL 中 进行 封 
装 ,以 提高 效率 。 


14.4.2 如 何 利用 LR 编写 FTP 脚本 


以 文件 上 传 为 例 , 利 用 LR 编写 FTP 脚本 的 具体 步骤 如 下 : 

(1) 首先 要 了 解 loadrunner 中 的 几 个 FTP 函数 。 

在 loadrunner 联机 帮助 文档 的 索引 中 ,输入 FTP, 此 时 会 看 到 不 下 50 个 与 FTP 有 
关 的 函数 ,其 实 要 解决 使 用 FTP 文件 上 传 这 个 问题 ,只 需要 以 下 几 个 步骤 就 可 以 了 : 

@ 与 FTP 服务 器 建立 连接 。 

@ 传输 文件 。 

@ 关闭 连接 。 

所 以 现在 只 需要 关注 与 这 三 个 步骤 有 关 的 函数 就 可 以 了 。 经 过 挑选 终于 找到 了 以 下 
几 个 函数 : 

J@ 与 FTP 服务 器 建立 连接 的 函数 。 


ftp logon ex (FTP * ppftp, har * transaction，char * url, IAST); 


这 个 函数 主要 的 功能 是 建立 与 FTP 服务 器 的 连接 ,其 中 的 参数 含义 如 下 : 

a，Transaction: 为 这 个 连接 起 一 个 名 字 ,在 这 里 随便 起 。 

b. url: ftp://username: password@mailserver: port ,指定 连接 用 户 名 、 密 码 、 服 务 
器 地 址 、 端 口 。 

@ 传输 文件 的 函数 。 


ftp put ex (FTP * ppftp, char * transaction, char * item list, IAST); 


这 个 函数 主要 的 功能 是 指定 把 本 地 的 某 个 文件 上 传 到 服务 器 的 某 个 目录 下 。 
a。 transaction: 为 这 个 操作 起 一 个 名 字 。 

b. item_list: 其 中 包括 

SOURCE_PATH ,指定 本 地 上 传 文件 的 路 径 。 

TARGET_PATH ,指定 要 上 传 到 服务 器 的 路 径 。 

ENDITEM ,标记 结尾 。 

@ 关闭 连接 的 函数 。 

ftp logout ex (FTP * ppftp); 

这 个 函数 的 主要 功能 是 断 开 FTP 连接 。 


(2) 模拟 文件 上 传 过 程 。 
具体 代码 如 下 : 
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BRction() 


unsigned long * ftp session=NULL; 
ftp_logon ex (sftp session, "ftp logon", "URI= ftp://192.168.0.70:21",IAST); 
ftp put ex(gftp session, Ftp Put", 


"SOORCE PATH= d:/huruihai .txt 
"TARGET PATH= /coreftplite/huruihai .txt", ENDTTEM, IAST); 
// 释 放 FIP 连接 
ftp logout ex(sftp session); 
retum 0; 


} 
这 样 ,就 基本 实现 了 FTP 脚本 的 编制 。 


14.4.3 web_custom_request 使 用 技巧 


初学 性 能 测试 时 候 , 第 一 步 必 学 脚本 录制 ,但 一 路 下 来 很 可 能 各 种 录制 失败 、 回 放 脚 
本 失败 的 问题 层出不穷 , 究 其 原因 一 是 LR 本 身 存 在 对 测试 环境 的 兼容 性 问题 导致 录制 
失败 ,更 深层 次 的 原因 是 录制 者 不 清楚 LR 录制 脚本 的 原理 ,或 者 不 清楚 客户 端 与 服务 器 
端 之 间 的 请 求 和 应 答 内 容 及 通信 方式 ,导致 一 旦 出 现 脚本 执行 失败 便 无 从 下 手 。 例 如 , 进 
行 实际 项 目的 一 个 接口 测试 时 ,假设 请 求 是 合作 第 三 方 发 起 的 且 不 容易 让 第 三 方 提供 他 
们 的 平台 来 做 测试 ,这 种 情况 是 没 办 法 取 录 制 脚本 的 ,只 能 选择 手动 编写 脚本 实现 。 得 知 
接口 是 使 用 HTTP 的 post 方法 ,想到 了 web_submit_form() 和 web_submit_data() 两 个 
函数 ,它们 实现 了 HTTP 请 求 中 的 post 方法 ,现在 它们 都 提交 表单 到 某 个 页 面 , 但 现在 
被 测试 的 仅 是 个 HTTP 接口 ,显然 这 两 个 函数 都 无 法 满足 需要 。 

这 种 情况 下 就 可 以 用 web_custom_request(), 这 个 函数 的 作用 是 自 定义 HTTP 请 求 
规则 ,甚至 可 以 说 web_custom_request() 函 数 是 一 个 可 以 用 于 自 定义 HTTP 请 求 的 “万 
能 ”函数 ,具有 web_link() .web_url() 、web_submit_data() 函 数 的 功能 ,可 以 自由 定义 需 
要 的 HTTP 的 get 和 post 请 求 。 

下 面 即 为 web_custom_request 函数 语法 详解 。 

语法 如 下 : 

Int web_custom reqhest (const char * RequestNeme, <Iist of Attributes>, 

i IAST); 
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返回 值 如 下 : 

LR_PASS(0) 代 表 成 功 。 

LR_FAIL(1) 代 表 失 败 。 

参数 如 下 : 

(1) RequestName: 步骤 的 名 称 ,VuGen 中 树 状 视图 中 显示 的 名 称 。 

(2) List of Attribute: 支持 的 属性 有 以 下 几 种 。 

Q@ URL。 

页 面 地 址 。 

@ Method 。 

页 面 的 提交 方式 ,post 或 get。 

G@ EncType。 

编码 类 型 。 此 参数 给 出 一 个 内 容 类 型 (ContentType) ,指定 其 作为 回放 脚本 时 
Content-Type 请 求 头 的 值 ,例如 text/html。web_custom_request 函数 不 处 理 未 编码 的 
请 求 体 。 请 求 体 参数 将 会 使 用 已 经 指定 的 编码 方式 。 因 此 ,如 果 指 定 了 不 匹配 HTTP 请 
求 体 的 EncType, 会 引发 服务 端的 错误 。 通 常 建议 不 要 手动 修改 录制 时 的 EncType 值 。 
任何 对 于 EncType 的 指定 都 会 覆盖 web_add_[auto_]header 函数 指定 的 Content-Type。 
当 指定 了 EncType=( 空 值 ) 时 ,不 会 产生 Content-Type 请 求 头 。 当 省 略 了 EncType 时 ， 
任何 一 个 web_add_[auto_]header 函数 都 会 起 作用 。 如 果 既 没有 指定 EncType 也 没有 
web_add_[auto_]header 函数 且 Method 二 POST ,application/x-www-{orm-urlencoded 
会 作为 默认 值 来 使 用 。 其 他 情况 下 ,不 会 产生 Content-Type 请 求 头 。 

@ BodyFilePath 。 

作为 请 求 体 传送 的 文件 路 径 。 它 不 能 与 下 面 的 属性 一 起 使 用 : Body 或 者 其 他 Body 
属性 或 Raw Body 属性 ,包括 BodyBinary,BodyUnicode,RAW_BODY_START 或 Binary 
一 1。 

@ UserAgent。 

用 户 代理 , 它 是 一 个 HTTP 头 的 名 字 , 用 来 标识 应 用 程序 ,通常 是 浏览 器 , 它 呈 现 的 
是 用 户 和 服务 器 的 交互 。 例 如 : 头 信息 User-Agent: Mozilla/4. 0 (compatible; MSIE 
6.0; Windows NT 5.0) 识 别 的 是 Windows NT 下 的 正 浏 览 器 6.0。 其 他 User-Agent 
的 值 用 来 描述 其 他 浏览 器 ,或 者 非 浏 览 器 程序 。 通 常 ,一 个 应 用 程序 中 所 有 的 请 求 都 使 用 
相同 的 用 户 代 理 , 录 制 者 作为 一 个 运行 时 的 参数 来 指定 (Run-Time Setting 一 Browser 
Emulation 一 User Agent) 。 不 管 怎 么 说 ,即使 是 在 一 个 简单 的 浏览 器 进程 中 , 仍 有 可 能 会 
用 到 直接 与 服务 器 交互 的 非 浏览 器 组 件 ( 例 如 ActiveX 控件 ) ,通常 它们 有 着 不 同 于 浏览 
器 的 用 户 代理 属性 。 指 定 UserAgent 表示 这 是 一 个 非 浏 览 器 的 请 求 。 指 定 的 字符 串 被 
HTTP 头 User-Agent: 使 用 ,在 某 些 情况 下 , 它 同 时 会 影响 回放 脚本 时 的 行为 。 例 如 ,不 
使 用 浏览 器 缓存 ,假设 指定 的 URL 属于 资源 等 。(LoadRunner 本 身 不 检查 指定 的 字符 
串 与 浏览 器 本 身 的 值 是 否 相同 。) 

© Binary。 

Binary 王 1 表示 页 面 请 求 体 中 的 每 一 个 以 file://x/# # 形 式 出 现 的 值 ( 在 这 里 ## ## 
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代表 两 个 十 六 进 制 数字 ) ,都 会 被 蔡 换 为 单字 节 的 十 六 进 制 值 。 如 果 Binary 王 0( 默 认 值 )， 
所 有 的 字符 序列 只 是 按照 字面 的 值 传递 的 。 需 要 注意 双 和 斜 杠 的 用 法 。 在 C 编译 器 中 双 
斜 杠 被 解释 为 单 斜 杠 。 如 果 不 需要 零 字 节 , 单 斜 杠 可 以 在 Binary 不 等 于 1 的 情况 下 使 用 
(例如 ,使 用 \x20 代替 file://x20/)。 如 果 需 要 零 字 节 , 那 么 只 能 使 用 file://x00/ 且 设置 
Binary 二 1,\x00 在 逻辑 上 会 被 截断 。 

® ContentEncoding。 

者 定 请 求 体 的 使 用 指定 的 方式 (gzip 或 者 deflate) 进 行 编码 (例如 ,压缩 ), 相 应 的 
Content-Encoding: HTTP 头 会 和 此 请 求 一 起 发 送 。 这 个 参数 适用 于 web_custom_ 
request 和 web_submit_data。 

® FtpAscii, 

1 使 用 ASCII 模式 处 理 FTP 操作 ;0 使 用 二 进 制 模式 。 

©@ TargetFrame。 

当前 链接 或 资源 所 在 Frame 的 名 称 。 除 了 Frame 的 名 字 , 还 可 以 指定 下 面 的 参数 。 

_BLANK: 打开 一 个 空 窗口 。 

_PARENT: 把 最 新 更 改过 的 Frame 替换 为 它 的 上 级 。 

_SELF: 替换 最 新 更 改过 的 Frame。 

_TOP: 替换 整个 页 面 。 

OW RecContentType。 

录制 脚本 时 响应 头 的 内 容 类 型 。 例 如 text/html、application/x-javascript 等 。 当 没 
有 设置 Resource 属性 时 ,用 它 来 确定 目标 URL 是 否 是 可 记录 的 资源 。 此 属性 包含 主要 
的 和 次 要 的 资源 。 最 频繁 使 用 的 类 型 是 text、application、image。 次 要 的 类 型 根据 资源 
不 同 变化 很 多 。 例 如 : RecContentType 二 text/html 表示 html 文本 。RecContentType 
二 application/msword 表示 当前 使 用 的 是 Msword。 

DD Referer。 

当前 页 面 关联 的 页 面 。 如 果 已 经 显 式 指定 了 URL 的 地 址 ,此 项 可 以 省 略 。 

四 Resource。 

指示 URL 是 否 属于 资源 。1 是 ;0 不 是 。 设 置 了 这 个 参数 后 ,RecContentType 参数 
被 忽略 。Resource 一 1 ,意味 着 当前 操作 与 所 在 脚本 的 成 功 与 否 关 系 不 大 。 在 下 载 资源 时 
如 果 发 生 错 误 , 是 当 作 警告 而 不 是 错误 来 处 理 的 ; URL 是 否 被 下 载 受 Run-Time 
Setting 一 Browser Emulation 一 Download non-HTML resources 这 个 选项 的 影响 。 此 操 
作 的 响应 信息 是 不 作为 HTML 来 解析 的 。Resource 二 0, 表 明 此 URL 是 重要 的 ,不 受 发 
送 请 求 (RTS) 的 影响 ,在 需要 时 也 会 解析 它 。 

四 ResourceByteLimit 。 

Web 页 面 下 载 资源 的 极限 大 小 。 当 达到 设置 的 极限 后 ,无 法 下 载 其 他 资源 ,仅仅 对 
需要 下 载 的 资源 有 效 。 下 载 过 程 : 如 果 总 计 下 载 大 小 小 于 极限 值 , 则 正常 开始 下 载 。 如 
果 下 载 时 达到 了 设置 的 极限 值 ,资源 大 小 可 知 ( 在 HTTP 响应 头 中 指定 了 Content- 
Length) ,在 这 种 情况 下 ,如 果 只 需要 一 个 缓冲 区 ,那么 下 载 可 以 正常 完成 。 如 果 需 要 的 
不 止 一 个 缓冲 区 ,或 者 资源 大 小 不 可 知 , 下 载 就 会 中 断 同时 关闭 当前 连接 。 这 个 特性 可 以 
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用 来 模拟 用 户 不 等 待 一 个 页 面 下 载 完 成 时 导航 到 另 一 个 页 面 的 情况 。 在 HTTP 模式 中 
无 法 使 用 ,在 Concurrent Groups(Vuser 脚本 中 的 一 个 区 ,此 区 中 的 所 有 函数 并 发 执行 ) 
区 中 也 无 法 使 用 。 仅 仅 适用 于 Sockets 的 回放 , WinInet 也 是 不 适用 的 。 

@@ Snapshot。 

快照 的 文件 名 。 

® Mode。 

两 种 录制 级 别 HTML、HTTP。HTML 级 别 一 一 在 当前 Web 界面 上 录制 直观 的 
HTML 动作 。 以 一 步 步 的 web_url、web_link、web_image、web_submit_form 来 录制 这 
些 动作 。VuGen 仅仅 录制 返回 HTML 页 面 的 请 求 ,不 处 理 脚本 和 应 用 程序 。HTTP 级 
别 VuGen 把 所 有 的 请 求 录制 为 web_url 指令 ,不 生成 web_link、web_image、web_ 
submit_form 这 些 函 数 。 这 种 方法 更 为 灵活 ,但 是 生成 的 脚本 不 够 直观 。 

@®@ ExtraResBaseDir。 

根 URL 放 在 EXTRARES 组 里 。 它 是 用 来 解析 相对 URL 的 ( 译 者 加 : 类 似 于 
Windows 的 相对 路 径 和 绝对 路 径 )。URL 可 以 是 绝对 路 径 ( 例 如 http://weather. abc. 
comy/weather/forecast. jsp? locCode 王 LFPO) ,也 可 以 是 相对 路 径 ( 例 如 forecast. jsp? 
locCode 二 LFPO)。 真 正 的 URL 的 下 载 是 通过 绝对 路 径 进行 的 ,所 以 相对 URL 路 径 必 
须 使 用 根 路 径 URL 去 解析 。 例 如 ,使 用 http://weather. abc. com/weather/ 作 为 根 路 径 
来 解析 forecast. jsp? locCode 二 LFPO, 最 后 的 URL 是 : http://weather. abc. com/ 
weather/forecast. jsp? locCode 二 LFPO。 如 果 没 有 指定 ExtraResBaseDir, 默认 的 根 
URL 是 主页 面 的 URL。 

DD Body。 

请 求 体 。 不 同 的 应 用 中 ,请 求 体 分 别 通过 Body、BodyBinary 或 者 BodyUnicode 参数 
来 传递 。 请 求 体 可 以 只 使 用 其 中 一 个 参数 ,也 可 以 使 用 一 连 串 分 开 的 参数 组 成 多 请 求 体 。 
例如 : 


web custam request( 


"BodyUnicode= REPRICE" 
"BodyBinary= \ \x08\ \x00\ \x00\ \x02\ \x00\ \x00" 
"Body= .\r\n" 
六 djjtbw (.tp?eg:h/6- - \rNnv 
IAST); 
在 上 面 的 代码 中 ,使 用 了 三 个 参数 来 划分 请 求 体 ,一 个 是 Unicode 段 ,一 个 是 二 进 制 
段 ,最 后 一 个 是 常规 的 字符 串 。 最 终 的 请 求 体 是 这 三 个 参数 按照 在 函数 中 的 顺序 连接 起 
来 的 值 。 还 有 一 个 很 少 用 到 的 参数 ,Binary。 它 也 能 描述 二 进 制 请 求 体 ,但 只 允许 函数 中 
只 有 一 个 请 求 体 参数 。 所 有 的 请 求 体 都 是 ASCII 字符 ,以 null 结束 。 
Body 表示 规则 的 、 可 打印 的 字符 串 ,无 法 表示 空 字 节 ,所 有 的 字符 都 以 一 个 反 斜 杠 表 
示 。 注 意 : 在 旧 的 脚本 中 .可 以 看 见 不 可 打印 的 字符 在 请 求 体 中 以 十 六 进 制 方式 进行 编 
码 。 例 如 \\x5c, 在 这 种 情况 下 ,必须 使 用 Binary 二 1 来 标识 。 空 字 节 使 用 file://0. 0. 0. 
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0/ 来 表示 。 相 反 , 新 脚本 则 会 把 请 求 体 分 开放 在 不 同 的 参数 中 ("”Body = …”"， 
"BodyBinary 一 …"”,，"Body 一 …") 。 

BodyBinary 表示 二 进 制 代码 。 不 可 打印 的 字符 在 请 求 体 中 以 十 六 进 制 方式 file:// 
xhh/ 进 行 编码 。 在 这 里 HH 表示 十 六 进 制 值 。 空 字 节 使 用 file://0. 0. 0. 0/ 来 表示 。 

BodyUnicode 一 一 美国 英语 , 特 指 拉丁 UTF-16LE(little-endian) 编 码 。 这 种 编码 方 
式 会 在 每 个 字符 末尾 附加 一 个 0 字 节 ,以 便 使 字符 更 可 读 。 但 是 在 VuGen 中 实际 的 参数 
是 把 所 有 的 0 字 节 都 去 掉 的 。 但 是 在 发 送 给 Web 服务 器 之 前 ，web_custom_request 函 
数 会 重新 添加 0 字 节 。 对 于 不 可 打印 的 字符 ,使 用 单反 斜 杠 表示 ,无 法 表示 空 字 节 。 

注意 : 如 果 请 求 体 大 于 100K 字 节 ,会 使 用 一 个 变量 来 代替 Body 参数 。 变 量 是 在 
lrw_custom_body. h 中 定义 的 。 

BB Raw Body。 

请 求 体 是 作为 指针 传递 的 ,此 指针 指向 一 串 数 据 。 二 进 制 的 请 求 体 可 以 使 用 
BodyBinary 属性 来 发 送 (或 者 使 用 Body 属性 来 传递 ,前提 是 必 设置 Binary 王 1)。 无 论 如 
何 , 这 种 方法 需要 使 用 转 义 字符 反 斜 杠 把 不 可 打印 的 字符 转换 为 ASCII 字符 。 为 了 能 有 
一 种 更 简便 的 表现 原始 数据 的 方式 ,Raw Body 属性 应 运 而 生 ,可 以 传递 指向 二 进 制 数据 
的 指针 。 使 用 4 个 连续 的 参数 集 来 表示 指针 ,而 且 必须 按照 顺序 排列 : 


RAW_BODY_ START 
指向 数据 缓冲 区 的 指针 
(Gint) 长 度 


RAW_BODY END 
例子 : 


char # abc= ../* apointer to the raw data * / 

Web_custam request ("StepName", 

URL= http://same-url ™, 

"Method= EOST 

RAW_ BODY START, 

nabcm 

3, 

RAW_BODY FND, 

IAST); 

在 应 用 中 ,即使 设置 了 数据 的 长 度 为 0, 指针 也 必须 有 值 ,不 能 为 空 。 在 Binary 二 1 
时 ,不 能 使 用 上 面 的 语法 传递 原始 数据 。 数 据 缓冲 区 中 的 数据 不 能 使 用 参数 化 。 也 就 是 
说 ,缓冲 区 中 的 任何 参数 (例如 {MyParam)) 不 能 被 正确 地 替代 为 相应 的 值 ,只 会 以 字面 
值 发 送 。 

(3) EXTRARES: 表明 下 面 的 参数 将 会 是 List Of Resource Attributes 了 。 

(4) LAST: 结尾 的 标识 符 。 

(5) List of Resource Attributes: 

仅仅 当 Recording Options 一 Recording 一 HTML-based script 一 Record within the 
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current script step 选项 被 选中 时 ,List of Resource Attributes 才 会 被 插入 代码 中 。Web 
页 面 中 的 非 HTML 机 制 产 生 了 资源 列表 ,包含 了 Javascript，ActiveX，Java applets and 
Flash 所 请 求 的 资源 。VuGen's 的 Recording 选项 中 ,可 以 设置 把 这 些 资源 录制 在 当前 的 
操作 中 (默认 是 此 设置 ) 还 是 作为 单独 的 步骤 来 录制 。 


14.4.4 特殊 的 录制 脚本 方法 


本 节 将 以 LoadRunner 对 Foxmail 程序 进行 录制 为 例 ,介绍 一 种 特殊 的 录制 脚本 的 方法 。 
运行 LoadRunner, 选 择 录制 脚本 。 在 录制 协议 选择 对 话 框 中 ,依然 选择 POP3 ,如 
图 14-12 所 示 。 


New Yirtual User x| 


New Single Protocol Script 


Category ;|All Protocols 了 


Cw ]_ ce | 


图 14-12 选择 录制 协议 


桂 殊 之 处 在 于 下 一 步 。 接 着 在 选择 录制 的 程序 时 ,不 再 按 典 型 的 方法 选择 Foxmail 
.exe, 而 是 选择 了 $LOADRUNNER \ bin \ wplus _ init _ wock. exe。 其 中 
$LOADRUNNER 是 LoadRunner 的 安装 目录 。 通常 $ LOADRUNNER 表示 C:\ 
Program Files\Mercury Interactive\Mercury Load Runner, 相 关 设 置 如 图 14-13 所 示 。 


Applcation gpe: [Wn32 Appicatons -| 忒 


Program to record ; 
Program argquments : 


Becord nto Actior sm S| 
ec | 


图 14-13 选择 录制 的 程序 
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紧 接着 , 单 击 Options 按钮 ,进入 录制 选项 设置 对 话 框 。 在 该 对 话 框 中 ,选择 左边 的 


一 个 选项 Port Mapping, 然 后 单 击 New Entry, 如 图 14-14 所 示 。 


图 14-14 录制 选项 设置 


在 接着 出 现 的 对 话 框 中 ,进行 以 下 设置 ,如 图 14-15 所 示 。 


一 Socket Service 
Target Server : |mal sipis com.cn 了 Port: ma "| 
尖 Service ID : |POP3 下 Service Type : Fe 加 | 
Record Type : Je 可 Connection Type : JPan 可 
一 55L Confiowation 
S SSLVersion; |SSL2/3 S| 
Sof Go TEST 7] 
厅 Use specilied cient-side certificate [Base64/PEM] 


| 
全 —— 


Password” 


万 Use specified prowy-server certificate (BaseEd/PEM]) 


| 
Password; 
TESX55L 


一 Traffc Forwarding 


显 避 (TAlow fowardng totargst sever fom locdport: [2 
© 


Description 

上 
the type of connection (ie. HTTP. RPC. etc.} This field must 
be no longer than B characters. 


cance | 
图 14-15 录制 选项 设置 
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对 设置 进行 总 结 如 下 : 

Target Server, 选 择 了 邮件 服务 器 的 地 址 ,这 里 可 以 输入 IP 地 址 。 由 于 POP3 的 端 
口号 是 110 ,在 Port 里 输入 110。 

ServiceID 选择 了 POP3 。 

在 底部 的 Traffic Forwarding 中 ,把 Allow forwarding to target server from local 
port 选中 ,并 设置 了 一 个 端口 。 这 个 端口 可 以 随便 设置 ,如 设置 成 了 123。 

其 意义 在 于 通过 这 样 的 设置 告诉 LoadRunner: 把 所 有 转发 到 LoadRunner 所 在 的 机 
器 的 123 端口 的 请 求 ,都 转发 到 mail. sipis. com. cn 的 110 端口 ,其 原理 如 图 14-16 所 示 。 


邮件 服务 器 


1 
1 
1 
1 
1 
1 
1 
1 
1 
1 
1 
1 
mail.sipis.com.cn 


图 14-16 设置 的 原理 示意 图 


做 完 LoadRunner 的 设置 后 ,需要 把 Foxmail 的 一 些 设置 进行 更 改 。 选 择 Foxmail 
的 “账户 ”一 属性 ”, 如 图 14-17 所 示 。 


从 Foxmal 2.1 导 入 (升级 2 (0U)… 
导入 internet 了 号 (ID) 


访问 口令 (AA) 


dl | A 


图 14-17 更 改 Foxmail 的 设置 


在 邮件 服务 器 设置 上 ,把 接收 邮件 服务 器 设置 成 localhost 或 者 127. 0. 0. 1。 然 后 单 
击 “ 高 级 "按钮 ,如 图 14-18 所 示 。 

在 高 级 设置 中 ,把 POP3 的 服务 器 端口 设置 成 123, 如 图 14-19 所 示 。 这 个 123 要 和 
在 LoadRunner 录制 选项 里 面 的 Allow forwarding to target server from local port 中 的 
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端口 设置 一 致 。 


他 ?#59 Fl 
焉 码 过 Ce 了 
Cee] ww | mon | 
图 14-18 设置 接收 邮件 服务 器 


准备 工作 结束 ,接着 启动 LoadRunner 的 录制 功能 。LoadRunner 激活 $ LOADRUNNER\ 
bin\wplus_init_wsock. exe, 如 图 14-20 所 示 。 它 实际 上 是 一 个 代理 服务 器 Proxy 程序 。 


ample): 。 括 到 
POP3 服务 器 端口 (P) : Co LoadRunner Sockets Proxy Auto-Starter 
_ Ww | er ey Tnterective Corp Coo2) 
—w | 


图 14-19 设置 POP3 服务 端口 号 图 14-20 激活 wplus_init_wsock. exe 


LoadRunner 会 做 一 些 初 始 化 的 工作 。 结果 导 致 什么 动作 都 没有 做 的 时 候 ， 
LoadRuner 已 经 捕获 了 14 个 网 络 通信 和 包 了 ,如 图 14-21 所 示 。 


Recording, (14 events). 


14-21 LoadRunner 对 初始 化 产生 的 通信 和 包 的 捕获 结果 


单 击 Foxmail 中 的 “收取 ”按钮 ,如 图 14-22 所 示 。 根 据 设 置 ,Foxmail 会 向 127.0.0.1 即 
本 机 的 123 端口 发 送 POP3 的 取信 和 命令。 这 些 命令 都 被 wplus_init_wsock. exe 捕获 了 。 
然后 wplus_init_wsock. exe 把 这 些 命 令 转发 到 mail. sipis. com. cn 的 110 端口 。 那 里 是 
真正 的 邮件 服务 器 。 邮 件 服务 器 把 信 取 出 后 ,发 给 wplus_init_wsock. exe, 然 后 wplus_ 
init_wsock. exe 把 信 转 发 给 Foxmail, 其 结果 就 是 Foxmail 正确 地 收取 到 了 邮件 。 

LoadRunner 显示 捕获 了 33 个 网 络 包 ,如 图 14-23 所 示 。 扣 除 上 面 14 个 ,实际 上 捕 
获 了 19 个 网 络 包 。 这 些 网 络 包 就 是 Foxmail 发 出 的 取信 请 求 和 邮件 服务 器 传递 给 
Foxmail 的 邮件 ,只 不 过 这 些 请 求 都 经 过 wplus_init_wsock. exe 这 个 proxy 程序 进行 转 
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图 14-22 ”选择 收取 


发 。wplus_init_wsock. exe 在 转发 的 同时 ,悄悄 把 这 些 通信 和 包 记 录 下 来 ,并 转化 成 了 脚 
本 。 这 就 是 LoadRunner 录制 脚本 的 真正 原理 所 在 。 


图 14-23 LoadRunner 捕获 的 网 络 包 数 量 


然后 ,停止 录制 看 以 下 最 后 的 结果 ,如 图 14-24 所 示 。 


By Mercury Virtual User Generator - [noname2 - Post Office Protocol (POP3)] 


Be 上 Yow Iromrt We pri Toos Wrdow bep 


noname42 - Post Office Protocol (POP3) 


国 wa Rction() 

(DB Acon ¢ 

\@ wset snd 

隔 gebssn pop31 = 9; 


pap3_logen_ex(&pop31，'"Pop3togom'， 
7URL-Pop3://uangyt:le120n3H961.155.22 .uv 
LAST); 


pop3_comnand_ex(&pop31, “Pop3Connand", 
“Comnand=STAT™, 
LAST); 


pop3_list_ex(Bpop31, “Pop3list", 
LAST); 


pop3_retrieve_ex(&pop31, “RetrieveNall”, 
“RetrieveLis 
“DeleteMail™ 
LAST)S 


pop3_delete ex(hpop31, “DeleteMail™, 
“DeleteList=1", 
LAST); 

Pop3_10goff_ex(tpop31); 


pop3_free ex(&pop31); 


return 0; 


[ReEwork Analyzer 
[Netvork Analyzer 
[Netuork Analyzer 
[Hetvork Analyzer 
[Network Analyzer 
[Hetvork Analyzer 


[For Hep, press FI. 


Analyzer Module: WPLUS (value-) 
Analyzer Hodule: POP3 (value-GetPopaprot: 
* Network Analyzer 18 


| 


图 14-24 最终 的 录制 结果 
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最 后 ,需要 关闭 wplus_init_wsock. exe。 否 则 再 次 录制 脚本 的 时 候 , 由 于 端口 已 经 被 
占用 ,导致 录制 无 法 进行 ,但 是 LoadRunner 不 会 报 任何 错误 ,这 是 最 容易 犯 的 错误 。 


14.5 本 章 小 结 


在 整个 性 能 测试 的 过 程 中 ,测试 脚本 的 编写 扮演 着 十 分 重要 的 角色 。 因 为 它 是 实现 
预定 测试 方案 的 具体 步骤 。 其 成 败 直 接 关系 到 ,测试 方案 能 不 能 被 忠实 地 执行 。 

因此 ,本 章 从 参数 化 脚本 ,手工 关联 和 自动 关联 ,日 志高 级 应 用 ,高 级 脚本 技术 几 个 方 
面 ,对 测试 脚本 编写 这 一 内 容 进 行 了 介绍 。 对 于 参数 化 脚本 ,说 明了 参数 化 的 目的 ,什么 
时 候 进 行 参数 化 以 及 怎样 进行 参数 化 ;对 于 关联 ,说 明了 其 原理 ,目的 ,以 及 手工 关联 和 自 
动 关联 的 具体 操作 步骤 。 另 外 本 章 还 介绍 了 loadRunner 中 日 志 的 高 级 应 用 和 高 级 脚本 
技术 的 应 用 。 
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第 15 章 测试 场景 设计 与 执行 
15.1 场景 设计 介绍 
15.1.1 新 建 场景 


当 虚 拟 用户 脚 本 开发 完成 后 ,使 用 LoadRunner 的 Controller 组 件 将 这 个 执行 脚本 
的 用 户 从 单 人 转化 为 众人 ,从 而 模拟 大 量 用 户 操作 ,进而 形成 负载 。 需 要 对 这 个 负载 模拟 
的 方式 和 特征 进行 配置 ,从 而 形成 场景 。 场 景 (Scenario) 是 一 种 用 来 模拟 大 量 用 户 操作 
的 技术 手段 ,通过 配置 和 执行 场景 向 服务 器 产生 负载 ,验证 系统 各 项 性 能 指标 是 否 达到 用 
户 要 求 ,而 Controller 组 件 可 以 帮助 人 们 对 场景 的 设计 、 执 行 及 监控 进行 管理 。 

使 用 Controller 组 件 管理 场景 主要 分 为 场景 设计 和 场景 监控 两 部 分 ,最 后 通过 运行 
场景 完成 性 能 测试 的 执行 。 

Controller 控制 器 提供 了 手动 和 面向 目标 两 种 测试 场景 。 一 般 情 况 下 使 用 手动 场景 
设计 方法 来 设计 场景 ,手动 设计 场景 最 大 的 优点 是 能 够 更 灵活 地 按照 需求 来 设计 场景 模 
型 ,使 场景 能 更 好 地 接近 用 户 的 真实 使 用 。 面 向 目标 场景 则 是 测试 性 能 能 否 达到 预期 的 
目标 ,在 能 力 规划 和 能 力 验证 的 测试 过 程 中 经 常 使 用 到 。 

创建 场景 有 两 种 方式 : 

(1) 通过 VuGen 直接 转换 当前 脚本 进入 场景 。 

在 Tools 菜单 下 打开 Create Controller Scenario ,就 可 以 将 当前 脚本 转化 为 场景 ,如 
图 15-1 所 示 。 

接着 需要 设置 场景 的 类 型 .负载 服务 器 的 地 址 .脚本 组 的 名 称 以 及 结果 的 保存 地 址 。 
如 果 选 择 Manual Scenario( 手 工场 景 ) ,那么 还 需要 进一步 设置 手工 场景 模拟 的 用 户 数 ， 
如 图 15-2 所 示 。 


Create Scenario EN| 


-Select Scenario Type 
Goal Oriented Scenario 辐 


| @ Manual Scenario 


| Number of Vusers: |1 四 


Load Generator: [eeanos 
Group Name: 


Resull Directory: [FAusesAthwpeskopwves 


Took | Wndow Hep 
@ HP ALM Connection... 


es 二 


[Add scriplio curant scenario 


图 15-1 在 VuGen 中 直接 生成 场景 图 15-2 VuGen 中 设置 手工 场景 属性 
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(2) 打开 Controller 新 建 场景 ,在 弹出 的 新 场景 设置 对 话 框 中 可 以 设置 场景 类 型 和 
对 应 的 脚本 ,如 图 15-3 所 示 。 


New Scenario 
-Select Scenario Type 
个 Manual Scenario 
Manage your load test by specilying the number of vitual users to run 
5 Use lhe Percentage Mode to distibute the Vusers among the scripts 


CF GoaDiented Scenario 
Alow LoadRunne Controler to create a scenafin based on the goals you specily 
-Select the scriptls] you would lke to use in your scenalio 
Available Sciipts Scipts in Scenafio 
- 重 d 国 4 一 > 
电 Benove 
党 Browse. 


副 Recod. 
HPALM.. 


[TShow at startup cael | tep | 


图 15-3 ”Controller 中 的 新 建 场景 设置 


将 左 侧 Available Scripts 脚本 列表 中 的 对 应 脚本 添加 到 右 侧 的 Scripts in Scenario 
场景 列表 中 即 可 ,也 可 以 通过 单 击 Browse 按钮 打开 已 经 存在 的 脚本 或 者 调用 Quality 
Center 上 的 脚本 。 


1. 目标 场景 


所 谓 目标 场景 (Goal Scenario) ,就 是 设置 一 个 运行 目标 ,通过 Controller 的 Auto 
Load 功能 进行 自动 化 负载 ,如 果 测 试 的 结果 达到 目标 , 则 说 明 系统 的 性 能 符合 测试 目标 ， 
否则 就 提示 无 法 达到 目标 。 

目标 场景 是 定性 型 的 性 能 测试 ,人 们 只 关心 最 后 性 能 测试 的 结论 是 否 符合 性 能 需求 ， 
常常 用 在 验收 测试 的 场合 。 

在 新 建 场景 时 选择 目标 场景 ,并 添加 需要 执行 负载 的 脚本 。 确 定 后 进入 目标 场景 设 
置 窗口 ,如 图 15-4 所 示 。 

在 目标 场景 中 主要 设置 一 个 需要 测试 的 目标 ,Controller 会 自动 逐渐 增加 负载 ,测试 
系统 能 否 稳定 地 达到 预先 设 定 的 目标 。 

单 击 Edit Scenario Goal 按钮 打开 目标 场景 编辑 对 话 框 ,如 图 15-5 所 示 。 

在 目标 场景 中 最 重要 的 就 是 目标 类 型 ,目标 场景 提供 了 5 种 目标 ,如 图 15-6 所 示 , 每 
种 目标 都 有 自己 独立 的 设置 。 

1) Virtual Users 

该 参数 表示 虚拟 用 户 数 ,被 测 系统 所 需要 支持 的 用 户 数 。 这 里 只 需要 填写 系统 能 够 
达到 的 用 户 数目 即 可 。 
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日 
| 


日 


站 
E 
E 


i 


图 15-4 目标 场景 设置 窗口 


Goal page Name: = Rename| Delete | New 
Scenario Stat Time. 


Goal Type: [He pe Second 刁 
条 Reach goal of [100.00 bits per second 
Usng a mnimum ol [50 and amasimum of [150 Vusers 
Scenario Settings |Load Behavior | 


Ek 


200 
FRun Time | 


Htargetcannotberesched 
Stop scenario and save results 
人 Continue scenario without reaching goal 
站 


厂 be not change ecorded thirk iine Le] ce | hep | 


图 15-5 设置 目标 场景 中 的 目标 


ee Scenaro 66 可 
Goal Type [His per Second el 


得 Reach goal of [Hits per Second 


15-6 目标 场景 中 提供 的 目标 类 型 


2) Hits per Second 
该 参数 表示 每 秒 单 击 数 , 是 指 在 一 秒 钟 能 够 做 到 的 单 击 请 求 数 目 , 即 客户 端 产生 的 每 
秒 请 求 数 (正常 情况 下 每 秒 单 击 数 等 同 于 服务 器 请 求 响应 数 ) 。 除 了 要 设置 单 击 的 指标 ， 
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还 需要 设置 在 线 用 户 的 上 下 限 ,场景 运行 时 会 自动 调整 用 户 数 ,来 测试 在 一 定 的 用 户 范围 
内 系统 是 否 都 能 达到 定义 的 目标 。 

3) Transactions per Second 

该 参数 每 秒 事 务 数 ,一 个 事务 代表 完成 一 个 操作 ,每 秒 事务 数 反映 了 系统 的 处 理 能 
力 。 当 脚本 中 含有 事务 函数 时 才 可 以 使 用 ,这 里 需要 事务 名 称 、TPS 指标 及 需要 完成 该 
指标 的 用 户 数 。 

4) Transaction Response Time 

该 参数 表示 事务 的 响应 时 间 ,反映 了 该 系统 的 处 理 速度 以 及 执行 一 个 操作 所 需要 花 
费 的 时 间 。 和 Transactions per Second 类 似 , 当 脚本 中 含有 事务 函数 时 ,可 以 设 定 事 务 啊 
应 时 间 的 指标 。 

5) Pages per Minute 

该 参数 表示 每 分 钟 页 面 的 刷新 次 数 ,反映 了 系统 在 每 分 钟 下 所 能 提供 的 Page( 页 面 ) 
处 理 能 力 。 页 面 的 生成 能 力 反 映 了 一 个 系统 的 整体 处 理 能 力 , 一 个 页 面 请 求 包含 了 多 个 
单 击 请 求 。 

当 设 置 完成 性 能 的 目标 后 ,还 需要 设置 一 下 场景 运行 时 的 模式 ,这 里 分 为 两 大 部 分 。 

(1) Scenario Settings( 场 景 设置 ) 提 供 对 目标 场景 运行 的 一 些 基础 设置 ,如 图 15-7 
所 示 。 


Scenario Setings | Load Behavior | 


-Run Time 
Run for [000:30:00 自 (HHH:MM:SS) after the target has been 


lf target cannot be reached 
F Stop scenario and save results 


他 Continue scenario without reaching goal 


克 Receive notification 


15-7 目标 场景 的 场景 设置 


Run Time 是 指 当 目标 达到 后 ,需要 继续 运行 多 长 时 间 来 测试 系统 的 稳定 性 ,默认 情 
况 为 30min。 目 标 场景 是 定性 型 场景 .目标 达到 并 不 代表 系统 就 满足 了 用 户 需求 ,还 需要 
进行 一 段 时 间 的 稳定 性 测试 ,确保 该 指标 能 够 在 一 段 时 间 内 达到 。 

而 如 果 目 标 无 法 达到 ,又 该 如 何 处 理 呢 ? 

@ Stop scenario and save results: 如 果 无 法 达到 目标 ,那么 整个 场景 停止 运行 。 

@ Continue scenario without reaching goal: 无 法 达到 目标 场景 仍 继续 运行 。 

当 勾 选 了 Receive notification 复 选 框 时 ,一 旦 出 现 目标 无 法 达到 的 情况 ,Controller 
会 弹出 信息 框 , 提 示 信 息 The target you defined cannot be reached。 

(2) Load Behavior( 负 载 生 成 ) 提 供 了 对 目标 场景 负载 生成 方式 Ramp Up 的 设置 ,如 
图 15-8 所 示 。 

此 处 可 使 用 自动 管理 ,也 可 以 手工 设置 一 个 需要 达到 的 目标 时 间 。 
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Scenario Settings Load Behavior 


Ramp Up 
G Rutomatia 
入 Reach target number of hits per second after |00:10:00 日 (HH 


CStepupby |20 hits per second 
every [00:02:00 日 (HHIMMSS) 


15-8 目标 场景 的 负载 规则 设置 


当 设 置 完成 后 ,就 可 以 启动 目标 场景 ,Controller 会 自动 调整 用 户 个 数 形成 负载 , 确 
认 在 这 种 负载 情况 下 ,定义 的 目标 都 可 以 达到 。 

目标 场景 的 目的 就 是 通过 设置 目标 来 验证 系统 能 否 达 到 目标 ,在 项 目 最 后 需要 确认 
质量 时 可 以 使 用 目标 场景 来 完成 最 终 的 测试 报告 ,而 当 需 要 定位 瓶颈 的 时 候 还 是 推荐 使 
用 手工 场景 。 在 最 终 的 验收 测试 中 经 常 需要 多 个 功能 同时 满足 某 一 性 能 目标 。 


2. 手工 场景 


手工 场景 (Manual Scenario) 就 是 自行 设置 虚拟 用 户 的 变化 ,通过 设计 用 户 的 添加 和 
减少 过 程 ,来 模拟 真实 的 用 户 请 求 模型 ,完成 负载 的 生成 。 

手工 场景 是 定量 型 性 能 测试 ,通过 掌握 在 负载 的 增加 过 程 中 系统 各 个 组 件 的 变化 情 
况 , 从 而 定位 性 能 瓶颈 并 了 解 系统 的 处 理 能 力 ,一 般 在 负载 测试 和 压力 测试 中 应 用 。 

手工 场景 主要 是 在 设计 用 户 变 化 ,通过 手工 场景 可 以 帮助 人 们 分 析 系 统 的 性 能 瓶颈 。 

手工 场景 的 核心 就 是 设置 用 户 负载 方式 ,通过 Scenario Schedule 的 Schedule By 和 
Run Mode 选项 可 以 对 虚拟 用 户 的 负载 方式 进行 设置 ,如 图 15-9 所 示 。 


Scenario Schedule 


Schedule by 他 Scenario © Group 
Run Mode: © Real-world schedule © Basic schedule 


Global Schedule 
务 泌 强 全 汪 | 国 |Total: 10Vusers 


Duration Bun for 00:05:00 CODE SS)》 
Stop Vusers Stop all Yasers: 5 every 00:00:30 (HOCSS) 


图 15-9 手工 场景 中 的 Scenario Schedule 


设置 场景 的 最 大 在 线 用 户 为 10 人 ,每 隔 15s 增加 2 个 负载 用 户 ,1min 后 达到 最 大 在 
线 用 户 数 ,持续 5min 后 ,用 户 每 30s 结束 5 个 负载 用 户 ,整个 场景 共 耗 时 6min30s。 
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通过 设置 Global Schedule 来 设计 用 户 的 增加 和 减少 过 程 , 具 体 的 用 户 负 载 情况 会 在 
右 侧 的 Interactive Schedule Graph 中 显示 出 来 ,如 图 15-10 所 示 。 


aa < Ey 


nteractive Schedule Graph 


om0000 0000%m 00020m 0000m m0 00050%m 000 000700 
Te 


图 15-10 ”Interactive Schedule Graph 场景 负载 图 


手工 场景 在 Schedule by 中 分 为 Scenario 模式 和 Group 模式 。 

1) Scenario 模式 

Scenario 模式 是 指 所 有 脚本 都 使 用 相同 的 场景 模型 来 运行 ,只 需要 分 配 每 个 脚本 所 
使 用 的 用 户 个 数 即 可 。 

Scenario 模式 下 的 Run Mode 有 两 大 类 : Real-world schedule 和 Basic schedule。 在 
LoadRunner 9 以 前 的 手工 场景 设计 中 ,只 有 一 种 情况 可 以 设 定 , 就 是 一 个 用 户 脚本 的 运 
行 场景 分 为 用 户 上 升 、 用 户 持 续 、 用 户 下 降 三 个 过 程 ,只 要 系统 满足 了 峰值 数据 后 , 即 可 证 
明 系 统 能 够 满足 性 能 需求 ,但 这 并 不 是 真实 的 负载 情况 。 从 LoadRunner 9 开始 提供 了 
Real-life schedule( 在 LR11 中 改名 为 Real-world schedule) ,也 就 是 说 可 以 建立 一 个 完全 
真实 的 场景 ,不 用 像 以 前 那样 只 能 模拟 一 座 山 峰 , 从 而 实现 压力 测试 和 真实 情况 下 的 负载 
测试 。 

Q@ Real-world schedule( 真 实 场景 模式 ) 。 

和 以 前 不 同 的 是 这 里 可 以 通过 Add Action 来 添加 多 个 用 户 变 化 的 过 程 ,包括 多 次 负 
载 增加 Start Vusers、 持 续 时 间 Duration 或 递减 Stop Vusers, 如 图 15-11 所 示 。 


Duration 


Stop Wasers [Stop all Yasers: 5 every 00:00:30 (0-0:SS) 


图 15-11 Real-world 下 的 Global Schedule 场景 添加 负载 策略 


先 来 学 习 设 置 用 户 的 初始 化 方式 。 双 击 Initialize Action, 弹 出 Edit Action 窗口 ,如 
图 15-12 所 示 。 

系统 提供 了 三 种 初始 化 用 户 的 方式 ,一 般 使 用 默认 选项 即 在 每 个 虚拟 用 户 开 始 运行 
前 进行 初始 化 。 
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下 < Frevrioa| Baxt > 


三 Initialize all Vusers sinultansously 


© Initidid! 习 Yosers everyfoo:00 5 DH Oomss) 


他 Initialize each Vuser just before it rms 


Cancel ply 
图 15-12 虚拟 用 户 初始 化 策略 


然后 学 习 设 置 负载 增加 Start Vusers。 双 击 Start Vusers 可 以 打开 负载 用 户 增 加 的 
策略 设置 对 话 框 ,如 图 15-13 所 示 。 


Motion type Start Vesers CPreviou| Next >» 


starthio 了 ] Vosers: 
© Simultaneously 


EE 司 waers every [000015 (HHMMSS) 


Coo | ssply 
图 15-13 修改 Start Vusers 用 户 增 长 负载 趋势 


在 这 里 可 以 设置 产生 负载 的 用 户 数 ,在 默认 情况 下 一 般 使 用 每 隔 一 段 时 间 增 加 一 定 
的 用 户 负载 方式 ,但 也 可 以 设置 为 立即 一 次 性 加 载 用 户 。 

建议 设置 为 周期 性 负载 增长 模式 ,这 样 能 够 更 加 有 效 地 获得 系统 在 各 个 负载 下 的 性 
能 指标 (避免 一 次 负载 太 大 ,系统 无 法 承受 ) ,除非 需要 做 某 些 特殊 情况 的 模拟 。 

接着 设置 负载 持续 时 间 Duration。 双 击 Duration 打开 设置 窗口 。 在 这 里 可 以 设置 
持续 时 间 长 度 , 通 过 一 定时 间 的 负载 可 以 测试 系统 在 该 负载 情况 下 的 稳定 性 ,也 可 以 选择 
只 执行 一 次 脚本 ,如 图 15-14 所 示 。 


Ne < Previon| Jext > 
CT Bun until conpletion 


Run fo DH days and'00:05:00 ott:ss) 


selp | Cancel Mpply 
图 15-14 修改 用 户 负载 持续 时 间 


最 后 设置 负载 释放 的 过 程 Stop Vusers。 双 击 Stop Vusers 打开 设置 对 话 框 ,这 里 提 
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供 了 两 种 释放 负载 的 策略 ,如 图 15-15 所 示 。 一 般 来 说 可 以 设置 用 户 直接 停止 ,也 可 以 通 
过 设置 负载 逐渐 下 降 ,分析 系统 回收 资源 的 能 力 。 


Edit Action 
Action typs Stop Vusers < Frevioa | st 
step [NL 本 Vosers: 
Simultaneously 
人 后 司 wsers every [oa00030 (HH:MMSS) 
nlp | Cancel Mpply 


图 15-15 修改 Stop Vusers 用 户 负载 递减 策略 


通过 反复 添加 Start Vusers/Duration/Stop Vusers 可 以 生成 一 个 波浪 形 的 场景 , 正 
是 因为 这 是 一 种 完全 自由 的 场景 设计 方式 ,所 以 才 被 称 为 Real-world, 即 完全 真实 地 模拟 
用 户 负载 的 过 程 ,通过 这 个 过 程 的 模拟 克服 了 以 前 场景 想 要 模拟 负载 反复 起 伏 的 困难 。 

Real-world schedule 模式 常常 用 在 压力 测试 和 稳定 性 测试 中 ,了 解 系统 在 长 时 间 波 
动 负载 下 的 资源 管理 能 力 ,而 Real-world 的 负载 策略 是 根据 性 能 需求 模型 来 确定 的 。 

@ Basic Schedule( 基 础 模式 ) 。 

这 种 模式 就 是 老 版 本 的 场景 设计 模式 ,只 能 设置 一 次 负载 的 上 升 持续 和 下 降 。 常 见 
的 负载 测试 都 是 通过 Basic 方式 实施 的 。 

在 Basic Schedule 模式 下 ,用 户 的 Duration 持续 时 间 设 置 会 多 出 Run indefinitely 选 
项 ,是 指 脚本 会 永 不 停止 地 运行 下 去 。 

基础 模式 其 实在 很 多 时 候 已 经 够 用 了 ,通过 它 生 成 一 个 峰值 负载 ,只 要 系统 能 够 满足 
这 个 峰值 即 可 。 一 般 来 说 只 要 在 峰值 下 满足 性 能 需求 ,那么 常规 情况 也 能 满足 性 能 需求 。 

但 是 有 时 候 会 发 现 虽然 峰值 性 能 指标 能 满足 ,但 系统 还 是 会 出 问题 。 这 是 因为 系统 
并 不 是 长 期 都 处 在 高 负载 状态 下 的 , 随 着 负载 的 变化 ,系统 的 资源 在 不 断 地 申请 释放 。 如 
果 在 这 个 过 程 中 存在 微量 的 资源 回收 失败 ,那么 时 间 一 长 系统 就 会 出 问题 。 另 一 方面 性 
能 测试 需要 对 用 户 行为 进行 模拟 ,如 果 场 景 只 有 经 典 模式 那么 如 何 模 拟 真实 的 用 户 负载 
波动 呢 ? 所 以 这 个 时 候 Real-world 就 有 意义 了 , 它 可 以 设置 一 个 与 真实 情况 类 似 的 场景 

负载 的 真实 性 是 受到 脚本 影响 的 ,一般 Real-world 运行 的 脚本 会 更 偏向 于 模拟 用 户 
操作 流程 ,而 Basic 的 脚本 则 更 偏向 于 模拟 一 种 操作 。 以 上 介绍 了 两 种 场景 的 运行 模式 ， 
那么 当 多 个 脚本 在 场景 运行 时 ,如 何 配置 它们 之 间 的 关系 呢 ? 

在 Scenario 模式 下 经 常 需要 模拟 多 个 脚本 共同 运行 的 情况 ,从 而 测试 系统 在 多 种 业 
务 下 的 处 理 能 力 。 

在 手工 场景 中 ,用 户 脚本 都 被 称 为 Group, 这 是 因为 每 一 个 用 户 组 都 代表 一 种 脚本 操 
作 ,通过 组 名 来 区 别 脚本 之 间 的 关系 。 

如 何 修改 各 个 Group 的 Quantity 用 户 数 呢 ? 首先 可 以 在 Start Vusers 内 修改 开始 
的 用 户 总 数 ,然后 需要 将 场景 的 用 户 修改 为 百分比 模式 ,选择 Scenario 菜单 下 的 Convert 
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Scenario to the Percentage Mode, 将 场景 用 户 模式 改 为 百分比 模式 ,如 图 15-17 所 示 。 


AUsersYathuD esktop\post_topic 
回 |ven_iop CAUserswrthunDesktopWiew_iopic 


Convert Scenario to th Mode 


人 Show Convert Scenario Mode Warning 


图 15-17 切换 手工 场景 用 户 数 为 百分比 模式 


通过 场景 的 运行 图 可 以 发 现 两 个 脚本 是 使 用 同样 的 负载 方式 进行 的 ,只 是 根据 用 户 
的 比例 分 配 负载 增加 的 趋势 。 

2) Group 模式 

在 Group 模式 下 ,除了 可 以 独立 设置 脚本 开始 原则 以 外 ,还 可 以 通过 Start Group 策 
略为 脚本 之 间 设 置 前 后 运行 关系 。 

双击 Group Schedule 下 的 Start Group Action ,打开 Start Group 策略 ,设置 该 脚本 
在 手工 场景 下 的 Group 模式 中 如 何 开始 运行 ,如 图 15-18 所 示 。 


Action type StartGroup 


他 Start immediately after the scenario begins 
© Start |o0:00:0C (otIM:SS) after the soenario begins 


C Start when grodview_topie 了 | finishes 


Es 六 EL E35 


15-18 ”Group 模式 下 的 Start Group 策略 


其 中 ,Start immediately after the scenario begins 表示 当场 景 一 开始 就 立即 运行 ; 
Start (HH: MM: SS)after the scenario begins 表示 当场 景 运行 多 长 时 间 后 再 运行 ;Start 
when group [] finishes 表示 当 某 一 个 group 结束 后 再 运行 。 

脚本 之 间 的 场景 设计 使 用 不 同 的 颜色 区 别 , 选 中 脚本 可 以 修改 该 脚本 的 运行 设置 ,如 
图 15-19 所 示 。 
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记 训 FDA A 


Interactive Schedule Gmph 


000200 00 001000 00:1200 00:1400 
009100 000300 000500 000700 0009.00 00:1100 00:1300 
Time 


图 15-19 Group 模式 下 多 脚本 Interactive Schedule Graph 


这 里 设置 的 view_topic 脚本 是 在 post_topic 脚本 场景 运行 结束 后 再 运行 的 。 在 某 些 
负载 策略 中 需要 使 用 Group 模式 才能 完成 场景 设计 。 

到 这 里 介绍 了 目标 场景 和 手工 场景 两 种 场景 类 型 。 场 景 提供 脚本 运行 的 方式 ,通过 
目标 场景 进行 定性 型 负载 ,通过 手工 场景 进行 定量 型 负载 。 

设计 场景 在 工具 上 并 没有 复杂 的 内 容 ,关键 在 于 性 能 需求 和 性 能 测试 目标 ,设计 的 场 
景 到 底 为 了 测试 什么 东西 是 在 场景 设计 前 需要 好 好 考虑 的 。 一 般 通过 在 场景 中 运行 一 种 
用 户 行为 可 以 对 某 一 个 功能 点 进行 性 能 测试 和 分 析 , 如 果 需 要 对 整个 系统 的 运行 情况 进 
行 性 能 测试 和 分 析 ,就 需要 同时 运行 多 个 脚本 。 如 果 在 场景 中 加 载 多 个 脚本 ,并 分 别 设置 
其 负载 方式 ,就 能 完成 真实 情况 下 的 负载 模拟 。 


15.1.2 负载 生成 器 管理 


当 对 场景 进行 设计 后 ,接着 需要 对 负载 生成 器 进行 管理 和 设置 。Load Generators 是 
运行 脚本 的 负载 引擎 ,在 默认 情况 下 使 用 本 地 的 负载 生成 器 来 运行 脚本 ,但 是 模拟 用 户 行 
为 也 需要 消耗 一 定 的 系统 资源 ,所 以 在 一 台电 脑 上 无 法 模拟 大 量 的 虚拟 用 户 , 这 个 时 候 可 
以 通过 调用 多 个 Load Generators 来 完成 大 规模 的 性 能 负载 。 

Load Generators 的 核心 是 mmdrv. exe 进程 ,mmdrv. exe 负责 运行 脚本 模拟 用 户 行 
为 ,该 程序 支持 进程 或 线程 的 方式 ,通过 Runtime Settings 即 可 进行 设置 。 

打开 Scenario 菜单 下 的 Load Generators, 如 图 15-20 所 示 。 

Load Generators 管理 器 列 出 了 所 管理 的 负载 服务 器 列表 ,添加 负载 引擎 只 需要 在 这 
里 单 击 Add 按钮 ,然后 在 对 话 框 中 输入 需要 连接 的 负载 引擎 所 在 的 电脑 卫 以 及 对 应 平 
台 即 可 (确保 对 应 平台 上 已 经 安装 并 启动 了 Load Generator 服务 ) ,如 图 15-21 所 示 。 

添加 该 引擎 后 ,可 以 单 击 Connect 按钮 连接 一 下 ,如 果 出 现 Ready 则 说 明正 确 连 接 ， 
该 负载 生成 服务 器 可 以 使 用 ,否则 就 需要 检查 一 下 是 什么 原因 导致 的 连接 错误 。 
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图 15-20 “Load Generators 管理 器 
Name: EA Cw™w | 
paiom [we 可 cee | 
Tompaaydiedoy[ ep | 
More # 


Sy Enable load generalo lo take patt in the scenaiio 


图 15-21 添加 远程 Load Generators 


当 远程 负载 服务 器 被 成 功 添加 至 负载 服务 管理 器 中 后 ,就 可 以 在 Scenario Group 中 
的 Group 脚本 右 侧 选择 使 用 哪 一 台 负 载 服务 器 来 运行 对 应 的 脚本 了 ,如 图 15-22 所 示 。 


| localhost 


[<Add...> 
localhost 


图 15-22 设置 脚本 运行 所 在 的 负载 生成 器 


通过 设置 多 个 Load Generator 可 以 有 效 地 增加 负载 量 , 解 决 单 台 电脑 无 法 模拟 大 量 
负载 的 问题 。 当 场景 开始 运行 时 ,Controller 会 先 将 脚本 传输 到 各 个 负载 生成 器 上 ,等 到 
运行 结束 后 ,各 个 负载 生成 器 的 日 志 会 被 Controller 回收 。 在 大 多 数 情况 下 ,使 用 进程 方 
式 时 一 个 Vuser 会 占用 接近 3MB 的 内 存 , 而 使 用 线程 方式 时 一 个 Vuser 大 概 只 占用 
200KB 的 内 存 。 为 了 保证 负载 生成 的 有 效 性 ,请 在 真正 实施 性 能 测试 前 先 测试 一 下 负载 
器 是 否 存在 硬件 瓶 贷 (生成 负载 时 的 CPU 内存 、 带 宽 占 用 情况 ) ,确保 负载 生成 时 负载 器 
自身 不 会 成 为 瓶颈 ,其 CPU 和 内 存 的 使 用 率 最 好 不 超过 80% 。 
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15.2 场景 执行 
15.2.1 场景 运行 的 准备 工作 


1. 用 户 管理 


在 Scenario Groups 工具 条 中 ,除了 运行 脚本 按钮 .查看 脚本 和 Run-Time Setting 功 
能 外 , Virtual Users 管理 器 是 经 常 使 用 的 一 个 功能 .该 功能 提供 了 一 个 对 负载 用 户 进行 
快捷 有 效 监控 的 操作 平台 ,如 图 15-23 所 示 。 


Scenario Groups 


器 二 两 贺 图 加 加 


[vr 


图 15-23” Scenario Groups 工具 条 


单 击 Virtual Users 按钮 ,弹出 虚拟 用 户 管理 器 ,如 图 15-24 所 示 。 


区 区 归公 |EREG | | 


15-24 ”虚拟 用 户 管理 器 


在 场景 运行 前 可 以 设置 待 运行 虚拟 用 户 的 状态 ,如 手动 启动 用 户 执行 ,也 可 为 场景 添 
加 或 停止 用 户 。 

当场 景 运行 时 ,可 以 通过 该 功能 对 某 个 正在 运行 的 用 户 进行 监控 。 例 如 : 选择 某 个 
正在 运行 的 用 户 ,右键 菜单 打开 Show User 功能 ,可 以 获得 该 用 户 的 运行 状态 ,也 可 以 选 
择 Show Vusers Log 功能 打开 该 用 户 运行 的 日 志 , 还 可 以 通过 过 滤 规 则 来 查找 不 同 状态 
的 虚拟 用 户 ,也 可 以 通过 函数 动态 为 虚拟 用 户 管理 器 中 的 Status 添加 信息 。 
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2. 运行 设置 

在 场景 运行 前 还 需要 对 脚本 的 运行 策略 进行 设置 ,确保 整个 场景 中 所 有 用 户 的 运行 
方式 正确 。 注 意 在 Controller 中 Run-Time Setting 独立 存放 在 场景 . lrs 文件 中 ,并 不 会 
影响 该 脚本 在 VuGen 中 运行 的 设置 。 

在 场景 运行 前 应 该 对 以 下 选项 进行 检查 设置 ,以 确保 脚本 正确 执行 。 

OD Think Time。 

在 VuGen 中 Think Time 默认 为 忽略 ,但 是 在 场景 中 ,该 选项 会 自动 按照 脚本 录制 
的 lr_think_time 函数 进行 运行 。Think Time 可 以 模拟 真实 用 户 的 操作 等 待 ,如 果 该 时 
间 设 置 得 太 短 ,那么 得 出 的 性 能 数据 就 会 比较 翡 观 (模拟 的 用 户 操作 比 真实 用 户 快 ,服务 
器 的 负载 压力 会 比 正常 情况 大 ,从 而 结果 较 差 ) ,反之 结果 会 过 于 乐观 ,所 以 这 个 时 间 不 能 
随意 设置 。 由 于 录制 脚本 的 时 候 对 业务 比较 熟悉 ,所 以 会 导致 Think Time 较 小 ,这 里 可 
以 尝试 取 一 个 熟练 用 户 的 操作 速度 和 一 个 新 用 户 的 操作 速度 的 平均 值 来 设置 合理 的 
Think Time 值 。 

@ 场景 中 mmdrv. exe 负载 的 生成 方式 。 

Load Generators 会 调用 mmdrv. exe 来 生成 负载 ,而 负载 的 生成 分 为 进程 方式 和 线 
程 方式 。 

使 用 进程 模式 模拟 负载 的 资源 开销 会 相对 较 大 ,每 个 虚拟 用 户 会 使 用 一 个 单独 的 
mmdrv. exe 来 完成 负载 的 实现 ,这 样 做 用 户 之 间 会 相互 独立 ,不 会 相互 影响 。 

而 如 果 使 用 线程 方式 ,那么 所 有 用 户 都 是 在 一 个 mmdrv. exe 上 模拟 的 ,用 户 行为 使 
用 线程 方式 ,模拟 消耗 的 资源 较 小 。 

一 般 来 说 使 用 线程 可 以 在 固定 的 硬件 平台 上 产生 更 多 的 负载 模拟 ,但 使 用 线程 也 会 
存在 不 稳定 的 情况 ,导致 用 户 脚本 执行 错误 。 

@ 系统 日 志 设置 。 

在 场景 中 系统 日 志 会 从 Always send messages 变 为 Send messages only when an 
error occurs, 不 出 现 错误 就 不 记录 日 志 , 这 样 可 以 减少 负载 时 记录 日 志 的 资源 开销 ,从 而 
提高 模拟 效率 。 当 需要 进行 错误 跟踪 时 ,再 将 其 打开 。 

@ 自动 化 事务 。 

在 脚本 中 都 会 对 关键 的 操作 添加 事务 从 而 获得 响应 时 间 , 在 LR11 中 默认 没有 打开 
自动 化 事务 ,所 以 对 比 以 前 版 本 如 果 没 有 设置 手工 事务 默认 在 场景 中 将 无 法 看 到 事务 时 
间 。 如 果 在 这 里 需要 自动 补充 事务 时 间 ,可 以 在 场景 运行 时 设置 该 选项 。 

加 带宽 模拟 。 

带宽 会 直接 影响 到 事务 的 响应 时 间 ,而 真实 环境 下 每 个 用 户 的 带宽 也 是 有 限 的 ,这 里 
需要 为 用 户 设置 一 个 合理 的 带宽 来 得 到 真实 用 户 访问 的 响应 时 间 。 

通常 情况 下 一 个 客户 端 在 访问 一 个 Web 网 站 时 的 平均 连接 速度 是 30 一 50kB/s, 这 
里 可 以 选择 512kb/s(DSL) 为 场景 中 的 每 个 用 户 分 配 512kb/s 的 带宽 。 为 了 避免 出 现 由 
于 模拟 用 户 过 多 ,导致 Load Generator 上 出 现 带宽 瓶颈 的 情况 ,需要 在 设置 前 进行 计算 。 
如 果 设 置 每 个 用 户 使 用 512kb/s 的 带宽 ,那么 在 100Mb/s 的 总 带宽 下 ,最 多 模拟 200 个 


155 


《软件 测试 理论 与 技术 》 


几 户 。 

@ 集合 点 策略 。 

集合 点 是 业务 操作 上 的 一 个 操作 聚集 点 。 如 果 脚 本 中 含有 集合 点 , 则 需要 根据 需求 
对 集合 点 的 策略 进行 设置 。 当 场景 需要 多 脚本 并 发 负载 时 ,只 需要 设置 同名 集合 点 即 可 
实现 。 


15.2.2 有 效 的 场景 运行 技术 要 点 


场景 运行 时 ,负载 生成 器 在 运行 过 程 中 : 保存 负载 生成 器 各 自 的 运行 过 程 中 的 结果 ; 
在 校本 执行 结束 以 后 将 相关 的 执行 结果 数据 传送 回 控制 台 以 便 分 析 。 控 制 台 在 运行 过 程 
中 : 保存 事务 以 及 系统 监控 的 各 种 数据 ;通过 集合 点 方法 去 控制 虚拟 用 户 的 同步 (可 
选 ) ;收集 各 个 虚拟 用 户 的 错误 与 确认 信息 。 

在 执行 场景 的 过 程 中 ,团队 合作 分 工 如 下 : 

(1) 测试 工程 师 通 过 LR 控制 台 监 控 事 物 处 理性 能 和 服务 器 的 情况 ; 

(2) 网 络 工 管理 员 在 负载 情况 下 监控 网 络 性 能 ; 

(3) 应 用 管理 员 或 者 数据 库 管理 员 在 负载 情况 下 监控 远程 系统 性 能 。 

在 有 效 地 运行 场景 时 ,执行 过 程 如 下 : 

(1) 调试 运行 (Debug Run) 。 

目标 检验 参数 化 的 数据 在 并 发 情况 下 使 用 是 否 正确 ; 

运行 设置 : 选择 扩展 日 志 , 选 择 接 收服 务 器 返回 信息 ,忽略 思考 时 间 ; 

期 待 结果 : 运行 过 程 中 没有 错误 ,这 表明 已 经 准备 好 继续 下 面 的 性 能 测试 条 件 。 

(2) 隔离 大 事务 (Isolate Top Time Transactions)。 

目标 : 挖掘 在 高 负载 下 任何 潜在 的 性 能 瓶颈 ; 

运行 设置 : 打开 标准 日 志 , 忽 略 思考 时 间 ; 

期 待 结果 : 挖掘 性 能 最 差 的 事务 ,为 完全 负载 做 最 后 各 个 方面 的 性 能 调 优 。 

(3) 完全 负载 运行 测试 。 

目标 : 模拟 与 现实 相符 的 场景 校 验 系统 是 否 满足 预期 目标 ; 

运行 设置 : 关闭 日 志 , 打 开 思 考 时 间 ; 

期 待 结 果 : 根据 测试 结果 校 验 是 否 满足 测试 目标 。 

(4) 预测 。 

目标 : 在 不 添加 资源 的 前 提 下 校 验 系统 未 来 可 能 出 现 的 瓶颈 ; 

运行 设置 : 关闭 日 志 , 打 开 思 考 时 间 ; 

期 待 结 果 : 负载 测试 目标 应 该 被 超过 ,响应 时 间 达 到 2 倍 完 全 负载 情况 下 的 响应 
时 间 。 


156 


测试 场景 设计 与 执行 


15.3 ”性 能 监控 
15.3.1 性 能 参数 监控 方法 


在 场景 运行 前 还 需要 对 系统 进行 监控 ,记录 负载 生成 的 规则 、 负 载 数据 和 系统 在 负载 
下 的 资源 使 用 情况 。 除 了 对 负载 的 生成 状态 进行 监控 外 ,被 负载 的 系统 资源 也 需要 进行 
监控 。 从 某 些 角度 来 说 性 能 测试 的 核心 可 能 是 监控 而 不 是 负载 和 调 优 。 

LR 提供 了 各 种 性 能 监控 指标 来 挖掘 性 能 瓶颈 ,主要 有 以 下 几 种 监视 器 用 于 监控 。 

(1) “运行 时 ”监视 器 ; 显示 参与 运行 场景 的 Vuser 数 ,Vuser 状态 以 及 Vuser 生成 的 
错误 数 和 类 型 。 

(2)“ 事 务 ”" 监 视 器 : 显示 场景 运行 时 各 事务 速率 和 响应 时 间 。 

(3)“Web 资源 ”监视 器 : 监视 场景 运行 期 间 Web 服务 器 上 的 信息 ,主要 包括 Web 
连接 数 、 香 吐 量 .HTTP 响应 数 、 服 务 器 重 试 次 数 和 下 载 到 服务 器 的 页 面 数 等 信息 。 

(4)“ 系 统 资源 ”监视 器 : 主要 是 监视 场景 运行 期 间 Windows、UNIX、Tuxedo、 
SNMP、AntaraFlameThrower 和 SiteScope 资源 的 使 用 情况 。 

(5)“ 网 络 延 迟 ” 监 视 器 : 显示 关于 系统 网 络 延 迟 的 信息 。 

(6)“ 防 火 墙 ?监视 器 : 用 来 量度 场景 执行 期 间 防火 墙 服务 器 信息 统计 的 情况 。 

(7) “Web 服务 器 资源 "监视 器 : 用 来 量度 场景 运行 期 间 Apache、 Microsoft IIS、 
iPlanet(SNMP) 和 iPlanet/ Netscape Web 服务 器 的 统计 信息 。 

(8)“Web 应 用 程序 服务 器 资源 ”监视 器 : 量度 场景 运行 期 间 应 用 程序 服务 器 Ariba、 
ATGDynamo、BroadVision、ColdFusion、Fujitsu INTERSTAGE、iPlanet (NAS )、 
Microsoft ASP Oracle9iAS HTTP、SliverStream、WebLogic(CSNMP) WebLogic(JMX) 
和 WebSphere 统计 信息 的 情况 。 

(9)“ 数 据 库 服务 器 资源 "监视 器 : 用 于 量度 场景 运行 期 间 数 据 库 DB2、Oracle、SQL 
服务 器 和 Sybase 统计 信息 的 情况 。 

(10)“ 流 媒体 ”监视 器 : 用 来 量度 场景 运行 期 间 RealPlayer 和 Media Player 客户 端 
以 及 Windows Media 服务 器 和 RealPlayer 音频 /视频 服务 器 的 统计 信息 。 

(11) “ERP/CRM 服务 器 资源 ”监视 器 : 用 来 量度 场景 运行 期 间 SAP R/3 系统 .SAP 
Portal、Siebel Server Manager、Siebel Web 服务 器 和 PeopleSoft(Tuxedo) 服 务 器 的 统计 
信息 。 

(12)“Java 性 能 ”监视 器 : 用 于 量度 J2EE 对 象 级 J2EE 和 EJB 服务 器 对 象 的 统计 
信息 。 

(13)“ 应 用 程序 组 件 ” 监 视 器 用 来 量度 场景 运行 期 间 Microsoft COM 十 和 
Microsoft. NET CLR 服务 器 的 统计 信息 。 

(14)“ 应 用 程序 部 署 解决 方案 ”监视 器 : 用 来 量度 场景 运行 期 间 Citrix MetaFrame 
XP 和 1. 8 服务 器 的 统计 信息 。 

(15)“ 中 间 件 性 能 ”监视 器 : 用 来 量度 场景 运行 期 间 Tuxedo 和 IBM WebSphere MQ 
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服务 器 的 统计 信息 。 
(16)“ 基 础 结构 资源 ”监视 器 : 用 来 量度 场景 运行 期 间 网 络 客户 端 数据 点 的 统计 
信息 。 


15.3.2 根据 测试 目标 添加 性 能 监控 参数 
1. 设置 监控 属性 


选择 Tools 习 Options 打开 属性 对 话 框 ,监控 Monitor 属性 页 如 图 15-25 所 示 。 


| 
Timeout | Run-Time Settings | Execution | Run-Time File Storage | Path Translation Table N 
Transaction Data Server Resource Monitors 


Enable Transaciion Monitor Data Sampling Rate [3 sec. 
Frequency: 电 司 
Error Handling 
人 Send errors to the Output window 
Pop-up an error message box 


NOTE: For these settings to take 


FDebug- 
effect you must reconnect to the i Debug level: 
load generator. ee 
ok Caneal Hep 


图 15-25 设置 监控 属性 


选中 允许 事务 监控 复 选 框 ,并 设置 监视 器 向 Controller 发 送 更 新 的 频率 ;同时 选择 错 
误 处 理 选项 ,推荐 为 Send errors to the Output window。 


2. 配置 监视 器 


启动 Monitor Configuration ,进入 监视 器 配置 对 话 框 , 如 图 15-26 所 示 。 


Monitor Configuration 四 


Servers 本 | VX Jeasurements to be 


Moni tored Servers 


LT9 add a server to nonitor, select Monitored Servers and click 
| 


Neasur enent Properties 一 
| Schedule: report neasureneat [10 二 Secona(s 
OK Cancel Apply 


图 15-26 ”监视 器 配置 对 话 框 


单 击 左上 角 的 十 号 按钮 添加 监视 器 ,如 图 15-27 所 示 。 
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New Monitored Server Properties ? 
Moni tored Janesomee 


railab]e 


口 Siebel Server anager 
口 sisbel Web Server 
口 Sitesoope 


Dr Resources 
DwebLogio (smm) 
回 Windows Resources ro 


eo | 


图 15-27 新 增 监视 器 
选择 需要 的 服务 器 并 设置 其 名 称 完成 配置 。 


15.4 本 章 小 结 


场景 就 好 比 一 个 舞台 ,性 能 测试 工程 师 就 好 比 导演 ,一 个 个 虚拟 用 户 脚 本 就 好 比 演 
员 ,通过 情节 设 定 (需求 ) ,将 一 个 个 演员 放 在 这 个 舞台 上 进行 演出 (负载 ) ,而 场 下 的 观众 
(监视 器 ) 会 对 每 个 演员 的 表演 进行 评分 (监视 结果 ) ,最 终 确定 最 佳 演员 和 最 差 演 员 ( 瓶 
颈 ) 。 场 景 运行 是 为 了 针对 某 一 个 功能 或 者 在 某 种 情况 下 对 负载 进行 模拟 ,从 而 了 解 在 这 
种 负载 下 的 系统 情况 。 做 一 个 演员 容易 ,做 一 个 导演 就 没 那么 简单 了 ,性 能 测试 工程 师 首 
先 要 有 能 力 通 过 需求 分 析 来 实现 场景 的 设计 工作 ,其 次 需要 对 被 负载 系统 的 各 个 环节 都 
有 一 定 的 了 解 和 评论 能 力 ,甚至 需要 一 个 专家 团队 来 协助 分 析 , 最 终生 成 测试 结果 。 
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第 16 章 ”测试 分 析 技 术 


在 测试 场景 执行 完成 后 ,很 多 测试 工程 师 认 为 最 困难 的 阶段 到 来 了 一 一 性 能 测试 结 
果 分 析 。 因 此 ,本 章 似乎 很 自然 地 就 成 为 最 重要 的 一 章 ,但 作者 却 认为 性 能 测试 分 析 并 不 
是 最 难 的 工作 。 所 谓 “ 万 丈 高 楼 平地 起 ”, 也 就 说 明 性 能 分 析 的 准确 性 同样 取决 于 此 前 所 
做 的 设计 与 实施 等 “地 基 ” 是 否 可 靠 。 因 此 可 以 说 ,性 能 测试 分 析 仅 仅 是 百 米 赛跑 中 最 后 
的 20m 而 已 。 当 然 ,这 并 不 是 说 性 能 测试 分 析 不 重要 ,因为 “最 后 冲刺 的 20m 没有 跑 好 ”， 
前 面 的 工作 做 得 再 好 也 是 徒劳 。 由 此 不 难 理解 ,性 能 测试 分 析 工 作 开 展 的 根基 就 是 前 面 
测试 场景 的 执行 结果 。 要 想 保 证 性 能 测试 分 析 的 结论 是 正确 的 ,那么 测试 结果 数据 首先 
就 应 该 是 正确 的 ,而 这 也 意味 着 测试 场景 以 及 测试 执行 过 程 都 应 该 是 正确 的 。 

实际 上 ,性 能 测试 从 始 至 终 都 应 该 是 相当 严 谦 的 一 项 工程 ,各 个 阶段 的 工作 环 环 相 
扣 , 因 此 ,性 能 测试 工程 师 应 该 认真 对 待 每 一 个 阶段 的 工作 。 如 果 一 味 地 追求 找 出 系统 瓶 
颈 , 无 疑 是 舍 本 逐 末 的 做 法 。 

本 章 的 主要 内 容 如 下 : 

(1) 如 何 分 析 性 能 测试 结果 ; 

(2) 如 何 从 分 析 图 中 发 现 问题 ; 

(3) 分 析 图 的 处 理 方法 ; 

(4) Analysis 分 析 报 告 。 


16.1 分 析 性 能 测试 结果 


1. 判断 测试 结果 是 否 有 效 


在 Controller 执行 的 测试 场景 结束 后 .首先 要 做 的 是 判断 采集 到 的 结果 数据 是 否 真 
实 有 效 。 多 数 性 能 测试 场景 都 需要 迭代 地 进行 测试 ,因此 很 多 测试 结果 本 身 就 不 能 反映 
真正 的 问题 ,而 深入 分 析 这 样 的 结果 纯 属 浪费 时 间 。 在 本 书 中 ,主要 探讨 如 何 针 对 有 效 的 
测试 结果 数据 进行 分 析 。 

判断 测试 结果 是 否 有 效 ,通常 按 下 面 的 步骤 进行 。 

第 一 步 : 在 整个 测试 场景 的 执行 过 程 中 ,测试 环境 是 否 正常 。 如 果 在 测试 过 程 中 出 
现 过 异常 ,那么 得 出 的 结果 往往 不 准确 ,无 须 进行 分 析 。 

例如 ,在 测试 执行 过 程 中 ,测试 机 的 CPU 利用 率 经 常 达到 100% 测试 环境 的 网 络 不 
稳定 、 一 些 系统 参数 配置 不 正确 等 ,这 样 得 出 的 测试 结果 没有 必要 进行 分 析 , 应 该 重新 设 
置 测试 场景 或 调整 测试 环境 ,再 次 执行 测试 。 

第 二 步 : 测试 场景 的 设置 是 否 正确 合理 。 测 试 场景 的 设置 是 否 正确 对 测试 结果 有 
很 大 的 影响 。 因 此 , 当 测 试 出 现 异常 时 ,要 对 场景 设置 进行 分 析 。 


测试 分 析 技术 


一 些 新 手 在 使 用 Controller 执行 测试 时 ,可 能 会 同时 在 一 台 PC 上 加 载 全 部 虚拟 用 
户 一 一 例如 同时 加 载 1000 个 虚拟 用 户 , 如 果 客 户 端 来 不 及 处 理 , 就 会 有 很 多 虚拟 用 户 因 
不 能 初始 化 而 失败 。 失 败 的 根本 原因 不 是 被 测试 的 应 用 服务 器 不 能 处 理 , 而 是 压力 根本 
没有 传输 过 去 。 正 确 的 做 法 是 增加 更 多 的 Generator 或 逐步 加 压 , 使 测试 场景 运行 起 来 。 

第 三 步 : 测试 结果 是 否 直接 暴露 出 系统 的 一 些 问题 。 对 测试 场景 的 整个 执行 过 程 ， 
没有 必要 对 压力 下 系统 运行 正常 的 结果 进行 分 析 , 因 为 这 样 的 结果 不 能 反映 出 系统 的 性 
能 问题 ,应 该 进一步 调整 场景 (如 增 大 压力 ) 进 行 测试 。 在 测试 过 程 中 使 系统 表现 不 正常 
的 测试 场景 生成 的 结果 则 要 进行 深入 分 析 。 实 际 上 ,分 析 能 够 反映 性 能 问题 的 测试 结果 
才 是 性 能 分 析 阶 段 的 主要 工作 。 

测试 结果 直接 暴露 系统 存在 性 能 问题 的 情形 很 多 ,例如 在 测试 过 程 中 一 些 用 户 事务 
的 响应 时 间 过 长 .系统 支持 的 最 大 并 发 用 户 数 过 低 、. 系 统 的 应 用 服务 器 CPU 利用 率 过 高 
或 内 存 不 足 等 。 对 这 类 测试 结果 ,性 能 测试 人 员 需 要 借助 Analysis 对 其 进行 深入 分 析 ， 
以 发 现 一 些 潜在 的 性 能 问题 。 


2. 性 能 分 析 的 基本 原则 
确定 测试 结果 有 效 之 后 , 接 下 来 就 要 开始 对 测试 数据 进行 深入 的 挖 气 了 。 面 对 测试 


工具 产生 的 纷繁 复杂 的 原始 测试 数据 ,如 何 来 进行 分 最 交 用 户 体验 

析 呢 ? 一 个 普遍 遵循 的 原则 是 “由 外 而 内 , 巾 表 及 里 ， | 交易 响应 时 间 

层 层 深入 ”, 如 图 16-1 所 示 。 | 系统 级 的 性 能 ~ 
对 于 一 个 应 用 系统 ,性 能 开始 出 现下 降 最 直接 的 网 络 和 服务 器 响应 时 间 

表象 就 是 系统 的 响应 时 间 变 长 。 于 是 ,系统 响应 时 间 组 件 级 的 性 能 

成 为 分 析 性 能 的 起 点 。 性 能 分 析 的 原则 如 图 16-1 所 | SI OE 

示 , 首 先 应 该 从 原始 测试 数据 中 查看 系统 响应 时 间 ， 图 16-1 性 能 分 析 原则 


判断 它 是 否 满足 用 户 性 能 的 期 望 。 如 果 不 能 满足 , 则 
说 明 系统 的 性 能 出 现 了 问题 。 发 现 系统 存在 问题 后 ,就 要 判断 系统 在 哪个 环节 出 现 了 
瓶颈 。 

现在 的 IT 系统 架构 极其 复杂 ,任何 一 个 环节 出 现 瓶 颈 ,都 会 导致 系统 出 现 性 能 问 
题 。 要 准确 地 判断 瓶颈 在 什么 地 方 ,的 确 是 一 个 环 手 的 问题 。 不 过 ,任何 复杂 的 系统 都 分 
为 网 络 和 服务 器 两 部 分 。 因 此 要 考察 的 第 二 个 问题 就 是 : 系统 的 瓶颈 是 出 现在 网 络 环 
节 , 还 是 服务 器 环节 ? 

如 图 16-2 所 示 ,用 户 从 客户 端 发 起 的 请 求 数据 包 经 过 网 络 ,传递 到 应 用 服务 器 ,最 后 
到 达 数 据 库 服务 器 ,服务 器 处 理 完毕 后 按 原 路 返回 客户 端 。 在 这 个 处 理 过 程 中 ,可 以 把 整 
个 时 间 分 为 两 段 : 一 段 是 T, , 即 网 络 的 响应 时 间 ; 另 一 段 是 T,, 即 服务 器 的 响应 时 间 , 包 
括 应 用 服务 器 和 数据 库 服务 器 的 响应 时 间 。 对 比 T 和 T, ,就 很 容易 知道 系统 在 哪些 环 
节 的 响应 时 间 比 例 较 大 。 

只 要 判断 出 系统 的 瓶颈 是 出 现在 网 络 还 是 服务 器 端 ,就 可 以 层 层 推进 对 相应 环节 的 
组 件 响应 时 间 进 行 深入 分 析 , 直 到 找到 造成 性 能 问题 的 根本 原因 。 

借助 LoadRunner 的 分 析 组 件 Analysis, 很 容易 按照 * 由 外 而 内 ,由 表 及 里 , 层 层 深 
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图 16-2 客户 交易 分 解 图 


入 ”的 原则 进行 分 析 , 快 速 将 问题 定位 。 例 如 从 图 16-3 中 可 以 直接 看 出 瓶颈 出 现在 网 
络 上 。 


Time to First Buffer Breakdown 


Time/s 


_bg_eross1 gt 
9._cr0oss2 9 


19215 eshte_pg2 gt 
192 16 estteicon gt- 


19216 mageshtie gf. 


192168 
192168. 


19246 boccaman jp 
19216 a09etmern bg or 
19246 agesmerul_igr 
1 的 16 agezinenul_m gr 
19218 ageaimenul_r gf 
19246 pgesmer2.1gf 
19216 .agesineru2_m gt 
19215 agesmenu2.rg 
19216_cons1lSv18_1 of- 
19216 consnSx18 gt 
192.16_ gesimer pg2 of 


图 16-3 客户 请 求 第 一 个 Buffer 的 分 解 示例 


看 了 前 面 的 内 容 , 也 许 很 多 人 会 以 为 性 能 分 析 非 常 容 易 , 借 助 工具 即 可 完成 ,但 实则 
不 然 。 即 使 有 了 正确 的 测试 结果 ,也 不 一 定 能 对 系统 的 性 能 问题 进行 正确 定位 。 例 如 , 服 
务 器 的 内 存 不 够 可 能 会 引起 较 大 的 磁盘 1/O, 进 而 导致 CPU 利用 率 居 高 不 下 ,其 根本 原 
因 可 能 是 程序 内 部 存在 内 存 泄 漏 ,而 不 是 内 存 瓶 颈 。 这 类 问题 不 但 要 靠 经 验 , 更 要 靠 对 系 
统 的 深入 了 解 。 

不 难看 出 ,性 能 测试 是 难度 较 大 的 一 项 工作 , 绝 不 是 一 跳 而 就 的 事情 。 根 据 作者 的 经 
验 , 最 好 的 办 法 是 把 性 能 分 析 贯 穿 于 性 能 测试 过 程 的 始末 ,所 有 人 员 都 应 该 给 予 高 度 
关注 。 

实际 上 ,性 能 测试 分 析 从 测试 场景 执行 时 就 开始 了 ,而 不 是 仅仅 在 测试 结束 后 才 进 行 
的 。 例 如 ,在 测试 执行 过 程 中 可 以 借助 分 析 数 据 库 , 观 察 事务 实时 响应 时 间 来 发 现 一 些 
问题 。 

除了 这 些 通用 的 方法 外 ,性 能 测试 分 析 人 员 还 应 该 在 测试 设计 、 执 行 、 分 析 等 各 阶段 
把 工作 做 透 ,只 有 这 样 才能 把 性 能 测试 工作 做 好 。 
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16.2 挖掘 LR 中 的 错误 信息 


在 测试 场景 执行 过 程 中 ,LoadRunner 采集 了 虚拟 用 户 、 操 作 系统 、 应 用 服务 器 等 各 
种 运行 数据 ,这 些 数据 成 为 分 析 系 统 性 能 的 重要 参考 资料 。 当 测试 场景 运行 结束 后 ,就 可 
以 通过 Analysis 对 这 些 测 试 结果 进行 专门 的 分 析 , 以 发 现 系 统 的 潜在 问题 。 

在 测试 结束 并 完成 测试 结果 数据 收集 后 ,就 可 以 启动 Analysis 打开 测试 结果 文件 ， 
将 其 导入 Microsoft Access 数据 库 , 然 后 按照 设置 的 模板 打开 默认 的 结果 分 析 图 。 通 常 
的 分 析 器 默认 界面 如 图 16-4 所 示 。 


A RE 
日 Yk ， ， 守 


Co ee ey 


Analysis Summary Peres: ppapoll 21.29.2 -00/0ye0l1 21.29 0s 


会 话 
浏览 器 图 显示 
区 域 
属性 窗口 
| 一 图 例 


图 16-4 Analysis 的 默认 分 析 概 要 界面 


利用 Analysis 进行 分 析 的 第 一 步 是 查看 分 析 概 要 报告 (Analysis Summary) ,图 16-4 
中 显示 的 即 为 分 析 概 要 报告 。 分 析 概 要 报告 展示 了 场景 运行 的 统计 信息 .事务 响应 时 间 
概述 .HTTP 响应 概述 (对 于 Web 测试 ) 等 。 

在 分 析 概要 结果 中 ,重点 查看 虚拟 用 户 的 运行 情况 (Statistics Summary) 和 事务 综述 
(Transaction Summary) 。 对 虚拟 用 户 ,主要 查看 最 大 并 发 用 户 数目 ;对 事务 综述 , 则 要 查 
看 最 大 、 最 小 、 平 均 .90% 事 务 最 大 响应 时 间 、 通 过 事务 数量 、 失 败 事务 数量 等 。 

在 场景 运行 时 可 以 看 到 一 些 图 ,这 些 图 将 场景 中 的 数据 转化 为 折线 图 ,方便 人 们 了 解 
当前 该 数据 的 状态 。 在 默认 情况 下 , Analysis 会 
自动 打开 如 图 16-5 所 示 的 几 张 分 析 图 。 可 以 通 
过 菜单 栏 Graphs 中 的 Add New Graphs 命令 完 
成 添加 图 的 操作 ,添加 后 弹出 Graphs 管理 器 ,如 人 
图 16-6 所 示 。 图 16-5 ”默认 情况 下 系统 打开 的 Graphs 

每 张 图 都 代表 了 场景 运行 中 监控 到 的 数据 变 
化 趋势 ,所 以 看 懂 每 一 张 图 的 含义 是 性 能 分 析 的 第 一 步 ,接着 来 介绍 一 些 常见 图 的 含义 。 

(1) 虚拟 用 户 (Vusers) 图 : 虚拟 用 户 图 分 为 运行 状态 的 虚拟 用 户 图 、 虚 拟 用 户 概 要 
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图 的 描述 


Scenaio Elopsed Te Whole duslion 


图 16-6 数据 图 管理 界面 


图 和 集合 点 图 三 类 ,主要 借助 其 查看 场景 与 会 话 的 虚拟 用 户 行为 ,可 以 帮助 人 们 了 解 负载 
生成 的 过 程 。 

@D Running Vusers( 负 载 过 程 中 的 虚拟 用 户 运 行情 况 ) 。 

该 图 可 以 反映 系统 形成 负载 的 过 程 , 随 着 时 间 的 推移 ,虚拟 用 户 数 是 如 何 变化 的 。 

在 图 16-7 中 可 以 看 到 用 户 在 9min 左右 到 达 了 负载 峰值 50 个 虚拟 用 户 , 负 载 的 生成 
是 大 约 每 分 钟 增加 5 个 用 户 ,峰值 负载 持续 1min30s。 


Running Vusers 


50 


Number of Vusers 


01:00 02:00 03:00 04:00 05:00 06:00 07:00 08:00 09:00 10:00 11:00 
Elapsed scenario time mm:ss 


图 16-7 Running Vusers 


@ Rendezvous( 负 载 过 程 中 集合 点 下 的 虚拟 用 户 数 ) 。 

当场 景 中 设置 了 集合 点 后 会 出 现 这 张 图 ,该 图 反映 了 随 着 时 间 的 推移 各 个 时 间 点 上 
并 发 用 户 的 数目 ,方便 人 们 了 解 并 发 用 户 数 的 变化 情况 。 在 图 16-8 中 可 以 看 到 刚 开 始 的 
7min 内 ,负载 的 并 发 用 户 都 是 1 个 ,而 后 面 变 化 为 2 个 用 户 并 发 。 

(2) Errors 图 : Errors 图 主要 有 错误 统计 、 每 秒 错误 数量 两 类 。 借 助 Errors 图 可 以 
发 现 服 务 器 什么 时 间 发 生 错误 以 及 错误 的 统计 信息 ,帮助 人 们 定位 产生 错误 的 原因 ,可 以 
分 析 服 务 器 的 处 理 能 力 。 
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Rendezvous 


Number of Released Vusers 


01:00 02:00 03:00 04:00 05:00 06:00 07:00 08:00 09:00 10:00 11:00 
Elapsed scenario time mm:ss 


图 16-8 Rendezvous 


通过 每 秒 错误 数 可 以 了 解 在 每 个 时 间 点 上 错误 产生 的 数目 ,该 数据 越 小 越 好 。 通 过 
这 个 图 可 以 了 解 错 误 随 负载 的 变化 情况 ,定位 何 时 系统 在 负载 下 开始 不 稳定 甚至 出 错 , 配 
合 系 统 日 志 可 以 定位 产生 错误 的 原因 。 

在 图 16-9 中 可 以 看 到 场景 在 37s 的 时 候 出 现 了 一 次 错误 。 


Errors per Second 


Number of Errors 


00:00 00:05 00:10 00:15 00:20 00:25 00:30 00:35 00:40 
Elapsed scenario time mm:ss 


图 16-9 Errors per Second 


(3) 事务 (Transactions) 图 : Analysis 和 事务 相关 的 分 析 图 表 有 事务 综述 图 、 事 务 平 
均 响应 时 间 图 、 每 秒 通 过 事务 数 图 、 每 秒 通过 事务 总 数 图 、 事 务 性 能 摘要 图 、 事 务 响应 时 间 
与 负载 分 析 图 、 事 务 响应 时 间 ( 百 分 比 ) 图 、 事 务 响应 时 间 分 布 图 等 ,给 出 了 所 有 和 事务 相 
关 的 数据 统计 ,通过 这 些 图 表 可 以 很 容易 分 析 应 用 系统 事务 的 执行 情况 。 

@ Average Transaction Response Time( 平 均 事 务 响 应 时 间 )。 

这 是 人 们 比较 关心 的 数据 之 一 ,反映 随 着 时 间 的 变化 事务 响应 时 间 的 变化 情况 ,时 间 
越 小 说 明 处 理 的 速度 越 快 。 如 果 和 前 面 的 用 户 负 载 生成 图 合并 在 一 起 看 ,就 可 以 发 现 用 
户 负载 增加 对 系统 事务 响应 时 间 的 影响 规律 。 

在 图 16-10 中 可 以 看 到 响应 时 间 是 如 何 增长 的 , 随 着 时 间 的 推移 响应 时 间 逐 渐变 长 ， 
并 且 在 不 到 8min 的 时 候 突 然 出 现 响 应 时 间 大 幅 下 降 的 情况 。 
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Average Transaction Response Time 


人 
b 


区 
己 


Average Response Time/s 


4 
2 


全 


1 1 1 
01:00 02:00 03:00 04:00 05:00 06:00 07:00 08:00 09:00 10:00 11:00 
Elapsed scenario time mm:ss 


图 16-10 Average Transaction Response Time 


另外 事务 的 响应 时 间 也 不 应 该 超过 用 户 的 最 大 接受 范围 ,否则 会 出 现 系统 响应 过 慢 
的 问题 。 

@ Transactions per Second( 每 秒 事务 数 ) 。 

另 一 个 关键 数据 是 TPS 和 否 吐 量 ,该 数据 反映 了 系统 在 同一 时 间 内 能 处 理 业务 的 最 大 
能 力 , 这 个 数据 越 高 ,说 明 系 统 处 理 能 力 越 强 。 

在 图 16-11 中 上 面 的 线 是 通过 的 事务 ,下 面 的 线 是 失败 的 事务 ,这 里 可 以 看 到 系统 的 
TPS 随 着 时 间 的 变化 逐渐 变 大 ,而 在 不 到 10min 的 时 候 系统 每 秒 可 以 处 理 1. 9 个 事务 。 
这 里 的 最 高 值 并 不 一 定 代表 系统 的 最 大 处 理 能 力 ,TPS 会 受到 负载 的 影响 ,也 会 随 着 负 
载 的 增加 而 逐渐 增加 , 当 系统 进入 繁忙 期 后 ,.TPS 会 有 所 下 降 , 而 在 4min 以 后 开始 出 现 
少量 的 失败 事务 。 


Transactions per Second 


2.0 


Number of Transactions 
> 


0.0 


01:00 02:00 03:00 04:00 05:00 06:00 07:00 08:00 09:00 10:00 11:00 
Elapsed scenario time mm:ss 


图 16-11 Transactions per Second 
@ Transaction Summary( 事 务 概 要 说 明 ) 。 


该 说 明 给 出 事务 的 Pass 个 数 和 Fail 个 数 ,了 解 负载 的 事务 完成 情况 。 通 过 的 事务 数 
越 多 ,说 明 系 统 的 处 理 能 力 越 强 ;失败 的 事务 越 少 ,说 明 系统 越 可 靠 。 
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在 图 16-12 中 可 以 看 出 ,对 于 reg 注册 操作 一 共有 613 次 操作 成 功 , 有 6 次 失败 。 可 
以 考虑 结合 前 面 的 每 秒 错误 数 进一步 分 析 为 什么 会 出 现 6 个 注册 错误 ,以 及 错误 发 生 的 
时 间 和 该 时 间 产 生 错误 的 原因 。 


Number of Transactions 
SSSs88s8s 


图 16-12 Transaction Summary 


@ Transaction Performance Summary( 事 务 性 能 概要 )。 

这 里 会 给 出 事务 的 平均 时 间 、 最 大 时 间 、 最 小 时 间 柱 状 图 ,方便 分 析 事 务 响应 时 间 的 
情况 。 在 图 16-13 中 可 以 看 到 reg 这 个 事务 的 最 大 时 间 为 3. 897s, 最 小 时 间 为 2. 555s, 平 
均 时 间 为 2. 924s。 柱 状 图 的 落差 越 小 说 明 响 应 时 间 的 波动 就 越 小 ,如 果 落 差 很 大 ,那么 
说 明 系 统 不 够 稳定 。 
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图 16-13 Transaction Performance Summary 


. Transaction Response Time Under Load( 在 用 户 负载 下 事务 响应 时 间 ) 。 
里 给 出 了 在 负载 用 户 增长 的 过 程 中 响应 时 间 的 变化 情况 ,其 实 这 张 图 也 是 将 
Vusers 和 Average Transaction Response Time 图 做 了 一 个 Correlate Merge 得 到 的 ,该 
图 的 线条 越 平 稳 , 说 明 系 统 越 稳 定 。 在 图 16-14 中 可 以 看 出 在 负载 逐渐 增加 到 5 个 用 户 
时 ,事务 的 响应 时 间 基 本 没有 变化 。 而 用 户 增加 到 15 个 开始 , 随 着 用 户 负载 的 增加 响应 
时 间 也 有 较 大 的 波动 。 
人 Transaction Response Time(Percentile) (事务 响应 时 间 的 百分比 ) 。 
给 出 的 是 不 同 百分比 下 的 事务 响应 时 间 范 围 ,通过 这 张 图 可 以 了 解 有 多 少 比例 
的 事务 发 生 在 某 个 时 间 内 ,也 可 以 发 现 响 应 时 间 的 分 布 规律 ,数据 越 平稳 说 明 响应 时 间 变 
化 越 小 。 在 图 16-15 中 可 以 看 到 60% 的 事务 是 在 3s 内 。 
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图 16-14 Transaction Response Time Under Load 
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图 16-15 Transaction Response Time(Percentile) 


@@ Transaction Response Time(Distribution) (每 个 时 间 段 上 的 事务 数 )。 
图 16-15 给 出 的 是 在 每 个 时 间 段 上 的 事务 个 数 ,响应 时 间 较 小 的 分 类 下 的 事务 数 越 


多 越 好 。 


从 图 16-16 中 可 以 看 到 在 所 有 的 事务 中 ,有 391 个 事务 的 响应 时 间 最 接近 2s, 而 


有 222 个 事务 的 响应 时 间 最 接近 3s。 
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图 16-16 Transaction Response Time(Distribution) 


测试 分 析 技术 


(4) Web 资源 (Web Resources) 图 : Web 资源 图 主要 有 Web 服务 器 的 吞吐 率 图 、 点 
击 率 图 .返回 的 HTTP 状态 代码 图 、 每 秒 HTTP 响应 数 图 、 每 秒 重 试 次 数 图 、 重 试 概述 
图 、 服 务 器 连接 数 概要 图 、 服 务 器 每 秒 建立 的 连接 数量 图 等 。 给 出 的 是 对 于 Web 操作 的 
一 些 基 本 信息 ,借助 Web 资源 图 ,可 以 深入 地 分 析 服 务 器 的 性 能 。 

中 Hits per Second( 每 秒 单 击 数 )。 

每 秒 单 击 数 提供 了 当前 负载 中 对 系统 所 产生 的 单 击 量 记 录 。 每 一 次 单 击 相当 于 对 服 
务 器 发 出 了 一 次 请 求 ,一般 单 击 数 会 随 着 负载 的 增加 而 增加 ,该 数据 越 大 越 好 。 

在 图 16-17 中 可 以 看 出 随 着 时 间 的 增加 ,每 秒 单 击 数 在 上 升 ,最 高 达到 78 次 /s。 
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图 16-17 Hits per Second 


@ Throughput( 带 宽 使 用 )。 

这 里 给 出 了 在 当前 系统 负载 下 所 使 用 的 带宽 ,该 数据 越 小 说 明 系 统 的 带宽 依赖 越 小 ， 
通过 这 个 数据 能 确定 是 否 出 现 了 网 络 带 宽 的 瓶颈 (注意 这 里 使 用 的 单位 是 字 节 ) 。 

在 图 16-18 中 可 以 得 到 最 高 的 带宽 峰值 是 355 000B, 远 远 低 于 100Mb 的 局 域 网 带宽 
上 限 ,所 以 系统 不 存在 带宽 瓶颈 。 
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图 16-18 ”Throughput 
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@ HTTP Responses per Second( 每 秒 HTTP 响应 数 ) 。 

这 里 给 出 了 每 秒 钟 服务 器 返回 各 种 状态 的 数目 ,该 数值 一 般 和 每 秒 单 击 量 相同 。 单 
击 量 是 指 客户 端 发 出 的 请 求 数 , 而 HTTP 响应 数 是 指 服 务 器 返回 的 响应 数 。 如 果 服 务 器 
返回 的 响应 数 小 于 客户 端 发 出 的 单 击 数 ,那么 说 明 服务 器 无 法 应 答 超 出 负载 的 连接 请 求 。 
在 图 16-19 中 可 以 看 到 最 高 峰 时 服务 器 每 秒 能 返回 接近 75 个 HTTP 200 OK 的 状态 。 
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16-19 HTTP Responses per Second 


这 个 数据 和 前 面 的 每 秒 单 击 数 吻合 ,说 明 服 务 器 能 够 对 每 一 个 客户 端 请 求 进行 应 答 。 

@ Connections Per Second( 每 秒 连接 数 )。 

这 里 会 给 出 两 种 不 同 状态 的 连接 数 , 即 中 断 的 连接 和 新 建 的 连接 ,方便 用 户 了 解 当 前 
每 秒 对 服务 器 产生 连接 的 数量 。 

在 图 16-20 中 可 以 看 到 随 着 时 间 的 推移 ,系统 的 连接 数 逐 步 上 升 ,最 高 达到 每 秒 4 个 
连接 。 
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图 16-20 Connections Per Second 


Number of Connections Per Second 


同时 的 连接 数 越 多 ,说 明 服 务 器 的 连接 池 越 大 , 当 连 接 数 随 着 负载 上 升 而 停止 上 升 
时 ,说 明 系 统 的 连接 池 已 满 ,无 法 连接 更 多 的 用 户 ,通常 这 个 时 候 服务 器 会 返回 504 错误 。 
可 以 通过 修改 服务 器 的 最 大 连接 数 来 解决 该 问题 。 

(5) 网 页 细 分 (Web Page Breakdown) 图 : 在 Controller 中 启动 网 页 细 分 功能 后 , 才 
可 以 在 Analysis 中 查看 网 页 细 分 图 ,启动 细 分 功能 的 具体 步骤 是 : 在 Controller 菜单 中 
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选择 Diagnostics 一 Distribution 进入 如 图 16-6 所 示 的 界面 ,在 图 16-21 中 同时 选中 
Enable the following diagnostics 和 Web Page Diagnostics(Max Allowed Distribution 
10%%) 复 选 框 。 


16-21 启动 网 页 细 分 图 功能 


网 页 细 分 图 主要 有 页 面 分 解 总 图 、 页 面 组 件 细 分 图 、 页 面 组 件 分 解 (随时 间 变 化 ) 图 、 
页 面 下 载 时 间 细 分 图 、 页 面 下 载 时 间 细 分 (随时 间 变 化 ) 图 、 第 一 次 缓冲 时 间 细 分 图 、 第 一 
次 缓冲 时 间 细 分 (随时 间 变 化 ) 图 .已 下 载 组 件 大 小 图 。 通 过 这 个 图 ,可 以 对 事务 的 组 成 进 
行 抽 丝 剥 茧 的 分 析 , 得 到 组 成 这 个 页 面 的 每 一 个 请 求 时 间 分 析 ,进一步 了 解 响应 时 间 中 有 
关 网 络 和 服务 器 处 理 时 间 的 分 配 关系 。 通 过 这 个 功能 ,可 以 实现 对 网 站 的 前 端 性 能 分 析 ， 
明确 系统 响应 时 间 较 长 是 由 服务 器 端 (后 端 ) 处 理 能 力 不 足 还 是 客户 端 连接 到 服务 器 的 网 
络 ( 前 端 ) 消 耗 导致 的 。 

@ Web Page Diagnostics( 网 页 分 析 ) 。 

添加 该 图 先 会 得 到 整个 场景 运行 后 虚拟 用 户 访问 的 Page 列表 ,也 就 是 所 有 页 面 下 载 
时 间 列 表 。 这 里 对 Discuz. Net 论坛 的 注册 用 户 事务 进行 分 析 。 在 图 16-22 中 可 以 看 到 
整个 负载 由 三 个 页 面 请 求 组 成 ,其 中 有 一 个 请 求 始终 在 0. 8s 以 内 ,而 另外 两 个 请 求 时 间 
较 长 并 且 有 上 升 趋势 。 


16-22 Web Page Diagnostics 


测试 分 析 技 术 
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然后 通过 Select Page to Break Down 命令 选择 具体 的 Page 来 获得 每 个 请 求 的 相关 
详细 信息 。 这 里 选择 创建 用 户 的 172. 168…x? createuser 二 1 请 求 进行 分 析 。 稍 后 可 以 在 
图 16-23 中 看 到 创建 用 户 响应 时 间 的 变化 , 随 着 时 间 的 增长 响应 时 间 从 2. 6s 上 升 到 了 3. 
9s, 并 且 在 7min30s 时 大 幅 下 滑 , 回 到 2. 6s 左右 。 
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16-23 ”Web Page Diagnostics 对 用 户 注册 页 面 细 分 


在 Diagnostics options 选项 中 提供 了 以 下 4 大 块 功能 。 

a. Download Time( 下 载 时 间 分 析 ) 。 

这 里 可 以 得 到 组 成 页 面 的 每 个 请 求 下 载 时 间 。 在 图 16-24 中 可 以 看 到 创建 用 户 的 操 
作 由 4 个 请 求 组 成 ,其 中 导致 注册 用 户 较 慢 的 主要 原因 是 注册 完成 后 需要 等 待 两 秒 钟 再 
刷新 至 论坛 首页 ,而 非 注册 用 户 本 身 需要 消耗 时 间 。 首 页 刷新 慢 也 只 是 因为 Client (客户 
端 ) 需 要 消耗 较 多 的 时 间 , 同 时 Receive( 接 收 ) 的 时 间 也 有 一 定 的 影响 。 


图 16-24 Web Page Diagnostics Download Time 


b. Component(Over time) (各 模块 的 时 间 变 化 ) 。 

这 里 列 出 组 成 页 面 的 每 个 元 素 , 以 及 随 着 时 间 的 变化 所 带 来 的 响应 时 间 变 化 。 通 过 
这 个 功能 可 以 分 析 响 应 时 间 变 长 是 因为 页 面 生成 慢 , 还 是 因为 图 片 资 源 下 载 慢 。 在 
图 16-25 中 可 以 发 现 随 着 时 间 的 增加 ,首页 的 处 理 时 间 ( 最 上 面 的 一 根 线 ) 从 0. 5s 上 升 到 
了 最 大 值 1. 6s, 而 注册 用 户 响 应 时 间 几 乎 没有 上 升 。 

c。Download Time(Over time) (模块 下 载 时 间 ) 。 

这 里 提供 了 针对 每 个 组 成 页 面 元 素 的 时 间 组 成 部 分 分 析 ,方便 确认 该 元 素 的 处 理 时 
间 组 成 部 分 。 在 图 16-26 中 可 以 发 现 首页 请 求 的 下 载 时 间 主 要 消耗 在 Client 上 ,而 
7min30s 之 前 Recevie 所 消耗 的 时 间 在 逐渐 变 长 。 
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图 16-26 Web Page Diagnostics Download Time(Over Time) 


d.，Time to First Buffer(Over time) (模块 时 间 分 类 ) 。 

这 里 会 列 出 该 元 素 所 使 用 的 时 间 分 配 比 例 ,是 受 Network Time 影响 多 还 是 
ServerTime 影响 多 。 在 图 16-27 中 可 以 看 出 ,对 于 首页 刷新 的 响应 时 间 来 说 ,主要 是 
Network Time 网 络 上 消耗 的 时 间 , 而 Server Time 服务 器 端的 处 理 是 非常 优秀 的 。 
Server Time 是 指 服务 器 对 该 页 面 的 处 理 时 间 ;Network Time 是 指 网 络 上 的 时 间 开 销 。 
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图 16-27 WebPage Diagnostics Time to First Buffer(Over time) 


通过 这 4 张 分 析 图 ,可 以 了 解 到 对 于 事务 的 响应 时 间 来 说 ,服务 器 的 处 理 时间 并 不 是 
组 成 响应 时 间 的 主要 部 分 ,而 网 络 问题 通常 会 占用 超过 70% 的 时 间 , 通 过 Web Page 
Diagnostics 可 以 准确 分 析 响 应 时 间 ,避免 由 于 网 络 延迟 或 者 带宽 问题 而 影响 对 响应 时 间 
的 分 析 和 瓶颈 定位 。 

@ Page Download Time Breakdown( 页 面 响应 时 间 组 成 分 析 ) 。 

这 张 图 中 显示 了 每 个 页 面 响应 时 间 的 组 成 分 析 , 一 个 页 面 的 响应 时 间 一 般 由 以 下 内 
容 组 成 。 

a Client Time: 客户 端 浏览 器 接收 所 需要 使 用 的 时 间 ,可 以 不 用 考虑 。 

b. Connections Time: 连接 服务 器 所 需要 的 时 间 , 越 小 越 好 。 

c. DNS Resolution Time: 通过 DNS 服务 器 解析 域名 所 需要 的 时 间 , 解 析 受 到 DNS 
服务 器 的 影响 , 越 小 越 好 。 
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d. Error Time: 服务 器 返回 错误 响应 时 间 ,这 个 时 间 反 映 了 服务 器 处 理 错误 的 速度 ， 
一 般 是 Web 服务 器 直接 返回 的 ,包含 了 网 络 时 间 和 Web 服务 器 返回 错误 的 时 间 ,该 时 间 
越 小 越 好 。 

e. First Buffer Time: 连接 到 服务 器 ,服务 器 返回 第 一 个 字 节 所 需要 的 时 间 , 反 映 了 
系统 对 于 正常 请 求 的 处 理 时 间 开 销 ,包含 网 络 时 间 和 服务 器 正常 处 理 的 时 间 ,该 时 间 越 小 
越 好 。 

{. FTP Authentication Time: FTP 认证 时 间 , 这 是 进行 FTP 登录 等 操作 所 需要 消 
耗 的 认证 时 间 , 越 短 越 好 。 

g. Receive Time: 接收 数据 的 时 间 ,这 个 时 间 反 映 了 带宽 的 大 小 ,带宽 越 大 ,下 载 时 
间 越 短 。 

h. SSL Handshaking Time: SSL 加 密 握手 的 时 间 。 而 Analysis 在 这 里 会 分 析 得 到 
页 面 请 求 的 组 成 比例 图 ,便于 分 析 页 面 时 间 浪 费 在 哪些 过 程 中 。 在 图 16-28 中 可 以 看 到 
各 个 页 面 请 求 的 响应 时 间 组 成 情况 ,相对 于 172. 168. 0. 200 的 首页 请 求 , 时 间 主 要 浪费 在 


Client 上 。 
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图 16-28 Page Download Time Breakdown 


加 Page Download Time Breakdown(Over Time) (页面 组 成 部 分 时 间 )。 

这 里 提供 了 随 着 时 间 的 变化 所 有 请 求 的 响应 时 间 变 化 过 程 。 这 里 会 将 整个 负载 过 程 
中 每 个 页 面 的 每 个 时 间 组 成 部 分 都 做 成 单独 的 时 间 线 ,以 便 分 析 在 不 同 的 时 间 点 上 组 成 
该 页 面 的 各 个 请 求 时 间 是 如 何 变 化 的 。 在 图 16-29 中 可 以 看 到 大 多 数 页 面 的 响应 时 间 是 
比较 稳定 的 ,其 中 首页 刷新 变动 较 大 。 


Page Download Time Breakdown (Over Time) 
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图 16-29 Page Download Time Breakdown(Over Time) 
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首先 找到 变化 最 明显 或 者 响应 时 间 最 高 的 页 面 ,随后 再 针对 这 个 页 面 进行 进一步 的 
分 析 了 解 时 间 偏 长 或 者 变化 较 快 的 原因 。 

@ Time to First Buffer Breakdown( 页 面 请 求 组 成 时 间 )。 

这 里 提供 了 组 成 页 面 时 间 请 求 的 比例 说 明 ( 客 户 端 时 间 / 服 务 器 时 间 ) ,通过 这 张 图 ， 
可 以 直观 地 了 解 到 整个 页 面 的 处 理 是 在 服务 器 端 消耗 的 时 间 长 ,还 是 在 客户 端 消耗 的 时 
间 长 ,从 而 分 析 得 到 系统 的 性 能 问题 是 在 前 端 还 是 在 后 端 。 

在 图 16-30 中 可 以 看 出 对 于 整个 负载 来 说 ,网 络 或 客户 端的 时 间 开 销 占 了 绝 大 多 数 。 

@ Time to First Buffer Breakdown(Over Time)( 基 于 时 间 的 页 面 请 求 组 成 分 析 ) 。 

和 图 16-30 不 同 的 是 ,这 里 给 出 了 在 整个 负载 过 程 中 ,每 一 个 请 求 的 Server Time 和 
Client Time 随 着 时 间 变 化 的 趋势 ,可 以 方便 定位 响应 时 间 随 着 时 间 变 化 的 原因 到 底 是 由 
于 客户 端 变化 导致 的 还 是 由 于 服务 器 端 变化 导致 的 。 


0 
172.16.. .00/register.aspx (main URL) 172.168.0 .200 (main URL) 
Component Name 


图 16-30 Time to First Buffer Breakdown 


在 图 16-31 中 可 以 看 到 对 于 用 户 注册 操作 ,网 络 上 的 时 间 变 化 比 服 务 器 上 的 时 间 变 
化 要 剧烈 。 


Time to First Buffer Breakdown (Over Time} 


01:00 02:00 03:00 04:00 05:00 06:00 07:00 08:00 09:00 10:00 
scenario time mm-ss 


16-31 Time to First Buffer Breakdown(Over Time) 


(6) 网 络 监控 (Network Monitor) 图 : 如 果 在 Controller 中 添加 了 Network Delay 
Time 监控 后 会 出 现 该 数据 图 。 这 个 功能 很 好 但 并 不 是 非常 直观 和 方便 ,建议 使 用 第 三 方 
专门 的 路 由 分 析 工 具 进 行 网 络 延 迟 和 路 径 分 析 。 


175 


《软件 测试 理论 与 技术 》 


QD Network Delay Time。 
这 里 会 给 出 从 监控 机 至 目标 主机 的 平均 网 络 延迟 变化 情况 。 在 图 16-32 中 可 以 看 到 
网 络 延 迟 从 240ms 逐渐 减少 到 26ms, 最 后 上 升 到 340ms。 


Network Delay/ms 
SBS 


00:15 00:30 00:45 01:00 01:15 01:30 01:45 02:00 02:15 02:30 02.45 03:00 03:15 03:30 03;45 04:00 04:15 04:30 
scenano time mm:ss 


图 16-32 Network Delay Time 


©@ Network Sub-Path Time。 

这 里 给 出 从 监控 机 至 目标 机 各 个 网 络 路 径 的 平均 时 间 。 当 客户 端 在 连接 一 个 远程 服 
务 器 时 ,路 径 并 不 是 唯一 的 ,受到 路 由 器 的 路 由 选择 ,可 能 会 选择 不 同 的 路 径 最 终 访问 到 
服务 器 。 在 图 16-33 中 列 出 了 从 监控 服务 器 至 目标 服务 器 所 经 历 的 路 径 ,以 及 每 个 路 径 
上 的 网 络 延迟 。 

@ Network Segment Delay Time。 

这 里 给 出 各 个 路 径 上 各 个 节点 的 网 络 延迟 情况 。 和 图 16-33 不 同 的 地 方 在 于 ,这 里 
给 出 的 是 路 由 器 和 路 由 器 之 间 的 网 络 延迟 情况 ,针对 连接 而 不 是 路 径 。 

图 16-34 中 给 出 了 路 由 器 和 路 由 器 之 间 的 网 络 延迟 变化 情况 ,以 便于 分 析 影 响 整 个 
网 络 时间 的 原因 及 节点 。 

(7) 资源 监控 (System Resources) 图 : 资源 包括 很 多 种 ,在 Analysis 中 监控 的 都 是 各 
种 系统 的 计数 器 ,这 些 计 数 器 反映 了 系统 中 硬件 或 者 软件 的 运行 情况 ,通过 它 可 以 发 现 系 
统 瓶 颈 。 要 想 获得 系统 资源 图 ,必须 预先 指定 相关 的 计数 器 。 

@ System Resources( 系 统 资源 ) 。 

这 里 给 出 了 对 操作 系统 计数 器 的 监控 , 列 出 了 在 负载 过 程 中 系统 的 各 种 资源 数据 是 
如 何 变化 的 ,该 图 需要 在 场景 中 设置 了 对 应 系统 的 监控 后 才 出 现 。 

@ Database Server Resources( 数 据 库 资 源 ) 。 

这 里 给 出 了 数据 库 的 相关 资源 在 负载 过 程 中 的 变化 情况 。 
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00:15 00:30 00:45 01:00 01:15 01:30 01:45 02:00 02.15 02:30 02.45 03:00 03-15 03:30 03:45 04:0004:15 04:30 
scenario time mm-ss 


SS 


117.131.23.111->10.23.0.254 [WIN-HYPLYSL 
117.131.23.111->124.74.208.38 (WINHYPLY..。 113 
117.131.23.111->192168.0.1(WINHYPLY9... 0 
117.131.23.111->192168.22226 WINHYPL.. 28 
117.131.23.111->202 97.48.17 (WIN-HYPLY5.._168 


图 16-33 Network Sub-Path time 


Segment Delay/ms 


00:15 00:30 00-45 01:00 01:15 01:30 01:45 02:00 02:15 02.30 02.45 03:00 03:15 03:30 03:45 04:00 04:15 04:30 
Elapsed scenario time mm-ss 


10.23.0.254.>192 169.222.26 [bogon->bogon}.. 0 
117.131.23.111->192.168.0.1 [WIN-HYPLY.. 0 
124.74.208.38->218.1.69.228 [124.74.208 38. 0 
132168.01210230254 4 .到 


图 16-34 Network Segment Delay Time 


@ Web Server Resources(Web 服务 器 资源 ) 。 
这 里 给 出 了 Web 服务 器 资源 在 负载 过 程 中 的 变化 情况 。 
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面 对 Analysis 提供 的 几 十 个 测试 结果 分 析 图 ,很 多 人 会 感到 无 所 适 从 ,不 知 如 何人 
手 。 实 际 上 ,性 能 测试 分 析 要 求 执行 人 员 更 加 谨慎 和 细心 ,不 能 放 过 任何 一 个 缺陷 ,尤其 
要 深入 系统 内 部 来 进行 分 析 。 同 时 , 当 分 析 结果 时 还 应 该 借助 Analysis 以 外 的 各 种 分 析 
工具 。 例 如 ,可 以 借助 Oracle 提供 的 监控 与 分 析 工 具 , 也 可 以 借助 WebLogic 提供 的 监控 
与 分 析 工 具 , 要 想 尽 一 切 办 法 来 发 现 系 统 瓶 颈 。 

下 面 介绍 一 些 通用 的 性 能 测试 分 析 流 程 。 

第 一 步 : 从 分 析 Summary 的 事务 执行 情况 人 手 。 

Summary 主要 是 判定 事务 的 响应 时 间 与 执行 情况 是 否 合理 。 如 果 发 现 问题 , 则 需要 
做 进一步 分 析 。 通 常情 况 下 ,如果 事 务 执行 情况 失败 或 响应 时 间 过 长 等 ,都 需要 做 深入 
分 析 。 

下 面 是 查看 分 析 概 要 时 的 一 些 原则 : 

用 户 是 否 全 部 运行 ,最 大 运行 并 发 用 户 数 (Maximum Running Vusers) 是 否 与 场景 设 
计 的 最 大 运行 并 发 用 户 数 一 致 。 如 果 没 有 , 则 需要 打开 与 虚拟 用 户 相关 的 分 析 图 ,进一步 
分 析 虚 拟 用 户 不 能 正常 运行 的 详细 原因 。 

事务 的 平均 响应 时 间 、90% 事 务 最 大 响应 时 间 用 户 是 否 可 以 接受 。 如 果 事 务 响应 时 
间 过 长 , 则 要 打开 与 事务 相关 的 各 类 分 析 图 ,深入 地 分 析 事 务 的 执行 情况 。 

查看 事务 是 否 全 部 通过 。 如 果 有 事务 失败 , 则 需要 深入 分 析 原 因 。 很 多 时 候 , 事 务 不 
能 正常 执行 意味 着 系统 出 现 了 瓶颈 。 

如 果 一 切 正 常 , 则 本 次 测试 没有 必要 进行 深入 分 析 ,可 以 进行 加 大 压力 测试 。 

如 果 事 务 失败 过 多 , 则 应 该 降低 压力 继续 进行 测试 ,使 结果 分 析 更 容易 进行 。 

上 面 这 些 原则 都 是 分 析 Summary 的 一 些 常 见方 法 ,读者 应 该 灵活 使 用 并 不 断 地 进行 
总 结 与 完善 ,尤其 要 注意 结合 实际 情况 ,不 能 墨守成规 。 

第 二 步 : 查看 负载 发 生 器 和 服务 器 的 系统 资源 情况 。 

查看 分 析 概 要 后 , 接 下 来 要 查看 负载 发 生 器 和 待 测 服务 器 的 系统 资源 使 用 情况 : 查 
看 CPU 的 利用 率 和 内 存 使 用 情况 ,尤其 要 注意 查看 是 否 存在 内 存 泄漏 问题 。 这 样 做 是 
由 于 很 多 时 候 系 统 出 现 瓶 颈 的 直接 表现 是 CPU 利用 率 过 高 或 内 存 不 足 。 

应 该 保证 负载 发 生 器 在 整个 测试 过 程 中 其 CPU 内存、 带宽 没有 出 现 瓶 颈 , 和 否则 测试 
结果 无 效 。 而 待 测 试 服务 器 , 则 重点 分 析 测 试 过 程 中 CPU 和 内 存 是 否 出 现 了 瓶颈 。 
CPU 需要 查看 其 利用 率 是 否 经 常 达到 100% 或 平均 利用 率 一 直 高 居 95% 以 上 ;内 存 需 要 
查看 是 否 够 用 以 及 测试 过 程 是 否 存 在 溢出 现象 (对 于 一 些 中 间 件 服务 器 要 查看 其 分 配 的 
内 存 是 否 够 用 ) 。 

第 三 步 : 查看 虚拟 用 户 与 事务 的 详细 执行 情况 。 

在 前 两 步 确定 了 测试 场景 的 执行 情况 基本 正常 后 , 接 下 来 就 要 查看 虚拟 用 户 与 事务 
的 执行 情况 。 对 于 虚拟 用 户 ,主要 查看 在 整个 测试 过 程 中 是 否 运行 正常 ,如 果 有 和 较 多 用 户 
不 能 正常 运行 , 则 需要 重新 设计 场景 或 调整 用 户 加 载 与 退出 方式 再 次 进行 测试 。 对 于 事 
务 ,重点 关注 整个 过 程 的 事务 响应 时 间 是 否 逐 渐变 长 以 及 是 否 存在 不 能 正常 执行 的 事务 。 

总 之 ,任何 用 户 或 事务 的 执行 细节 都 应 该 认真 分 析 ,不 可 以 轻易 忽略 。 如 图 16-35 所 
示 的 就 是 一 个 性 能 逐步 下 降 的 服务 器 ,需要 进一步 分 析 其 性 能 下 降 的 原因 ,例如 查找 是 否 
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存在 内 存 汇 漏 问题 ;图 16-36 则 是 一 个 性 能 相对 稳定 的 服务 器 ,但 是 响应 时 间 偏 大 ,这 时 
需要 分 析 程 序 算法 是 否 存在 缺陷 或 服务 器 参数 的 配置 是 否 合理 。 


Average Response Time/s 
世 和 


Average Transaction Response Time 


Mm 
Elapsed scenano time hh mm 


人 工 市 核 通过 2768 8e21 13208 B921 2291 

1 ”得 击 人 工 审 核 T8076 ek Ed 5 41 
音 击 电话 铁 实 WE 587 M26 M75 5227 

1 电话 审核 通过 LE 8359 1333 EG 2801 


图 16-35 ”性 能 逐步 下 降 的 服务 器 


Average Response Time/s 


Average Tiansactien Response Time 


645 mm ms mn ms mom ms mo ms mm 
Elapsed scenano tene hh mm 


Moopronerd MrememAveeoe Merman Std 
alDecs_Tranaechon 110.382 123424 147 655 534 
marual_Tianzecéon 7 TE 的 本 7 5 
yin rl Trantachon 736 10 608 12301 1.0%4 
人 工 审 核 通过 15477 28205 47374 4058 
音 击 人 工 窗 核 2 3 i 2 
章 击 电话 楼 高 2 M7 0 4%9 
电话 楼 突 通过 6 2 1 380 


图 16-36 ”性 能 稳定 的 服务 器 


下 面 是 虚拟 用 户 与 事务 分 析 的 常用 准则 : 
虚拟 用 户 如 有 失败 , 则 要 查 明 原因 。 
在 整个 测试 过 程 中 ,所 有 的 虚拟 用 户 是 否 一 直 稳定 运行 并 成 功 执行 全 部 事务 。 如 果 
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仅 有 一 个 用 户 或 部 分 用 户 能 够 正常 运行 , 则 说 明 测 试 脚本 可 能 存在 问题 。 

对 于 失败 的 事务 首先 要 分 析 其 失败 原因 ,接着 要 查看 事务 的 失败 是 否 导 致 了 用 户 
失败 。 

判断 用 户 是 否 可 以 接受 事务 平均 响应 时 间 值 以 及 90% 用 户 的 最 大 响应 时 间 值 。 

查看 整个 测试 过 程 的 事务 平均 响应 时 间 是 否 逐 步 变 大 ,正常 情况 下 ,事务 平均 响应 时 
间 的 变化 应 该 是 接近 于 平行 X 轴 的 一 条 直线 。 

事务 响应 时 间 是 否 在 整个 测试 过 程 中 随 着 用 户 的 增加 而 线性 变 短 。 正 常情 况 应 该 
是 , 当 一 定 范围 内 的 用 户 并 发 时 ,事务 响应 时 间 应 不 会 有 太 大 的 变化 。 

服务 器 每 秒 通 过 的 事务 总 数 . 某 一 事务 每 秒 通过 数 是 否 稳定 ,如 果 整 个 测试 过 程 基本 
不 变 , 则 要 分 析 是 服务 器 达到 了 处 理 上 限 ,还 是 Generator 产生 的 压力 达到 了 上 限 。 

按照 迭代 次 数 来 运行 的 场景 ,要 分 析 通 过 的 事务 总 数 是 否 与 设 定 的 一 致 。 如 果 不 一 
致 , 则 可 能 是 测试 脚本 存在 错误 ,也 可 能 是 待 测试 程序 存在 功能 错误 ,应 该 在 调整 后 再 次 
进行 测试 。 

Analysis 对 虚拟 用 户 和 事务 提供 了 非常 强大 的 跟踪 功能 ,可 以 跟踪 每 一 个 用 户 及 其 
相关 事务 的 执行 情况 。 

第 四 步 : 查看 错误 发 生 情况 。 

整个 测试 过 程 的 错误 发 生 情 况 是 分 析 的 重点 。 下 面 查看 错误 发 生 情况 的 常用 准则 : 

查看 错误 发 生 曲 线 在 整个 测试 过 程 中 是 否 有 规律 变化 ,如 果 是 , 则 意味 着 程序 在 并 发 
处 理 方面 存在 一 定 的 缺陷 。 如 图 16-37 所 示 的 每 秒 缺陷 数量 曲线 很 有 规律 ,这 是 因为 服 
务 器 定期 生成 缓存 文件 导致 用 户 不 能 正常 访问 而 产生 的 错误 ;查看 错误 分 类 统计 ,作为 优 
化 系统 的 参考 。 例 如 Web 性 能 测试 , 当 出 现 瓶 颈 时 往往 需要 查看 服务 器 的 错误 统计 信息 
结果 : 如 果 * 超 时 错误 ”达到 90% 以 上 ,可 能 需要 提高 硬件 配置 ;如 果 有 和 较 多 的 “内 部 服务 
器 错误 ”, 则 可 能 是 程序 方面 存在 问题 。 


16-37 ”规律 变化 的 每 秒 错误 数 曲 线 图 


第 五 步 : 查看 Web 资源 与 细 分 网 页 。 
本 步骤 仅 适 用 于 Web 性 能 测试 。 查 看 Web 资源 图 时 ,往往 需要 结合 前 面 对 虚 拟 用 
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户 以 及 事务 响应 时 间 的 分 析 结 果 ,重点 分 析 服 务 器 的 稳定 性 。 对 于 网 页 细 分 功能 则 应 遵 
循 以 下 原则 : 首先 分 析 从 用 户 发 出 请 求 到 收 到 第 一 个 缓冲 为 止 ,哪些 环节 比较 耗 时 ;其 次 
找 出 页 面 中 哪些 组 成 部 分 对 用 户 响应 时 间 影响 较 大 ;在 页 面 的 性 能 问题 定位 后 ,就 可 以 采 
取 相 关 的 解决 方案 。 


16.3 ”通过 LR 图 表 组 合 挖掘 系统 缺陷 根源 


(1) Merge Graphs( 合 并 图 ) 。 

当 得 到 了 相关 图 形 ,如 何 分 析 图 和 图 之 间 的 关系 呢 ? Merge Graphs 提供 了 一 种 将 图 
和 图 合并 的 功能 ,通过 这 个 功能 可 以 直观 地 获得 一 个 数据 和 另外 一 个 数据 的 相互 影响 
关系 。 

在 Running Vusers 图 中 , 单 击 鼠标 右键 ,在 菜单 中 选择 Merge Graphs, 如 图 16-38 
所 示 。 

Merge 的 方式 有 三 种 : Overlay Tile .Correlate, 如 图 16-39 所 示 。 


Selectype ofmerge———— | 
| 人 Oveey ort of 2 charts that share «| 


| cI me 


| FC Corolate 
Tle of merged graph— 


| RmnnoVvees-HisperSecond | 


16-38 Merge Graphs 图 16-39 ” Merge 方式 设置 


这 三 种 合并 方法 可 以 帮助 人 们 对 测试 结果 进行 分 析 , 了 解 图 和 图 之 间 的 影响 关系 。 

QD Overlay。 

基于 Overlay 合并 方式 ,就 是 将 两 张 图 通过 X 轴 进 行 覆盖 合并 。 例 如 将 Running 
Vusers 和 Average Transaction Response Time 进行 Overlay 合并 ,如 图 16-40 所 示 。 

通过 这 张 图 可 以 得 到 用 户 增 长 的 过 程 是 如 何 影 响 事 务 平均 时 间 的 ,从 而 发 现 瓶颈 出 
现 的 时 间 。 

© Tile。 


Tile 模式 和 Overlay 方式 非常 接近 ,只 是 将 两 张 图 的 Y 轴 分 了 上 下 两 部 分 ,不 做 
从 。 


是 
加 
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Running Vusers - Average Transaction Response Time 
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16-40 ”Overlay 的 Merge 方式 


将 Running Vusers 和 Hits per Second 进行 Tile 合并 ,如 图 16-41 所 示 。 
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16-41 Tile 的 Merge 方式 


通过 这 个 合并 ,可 以 看 到 随 着 用 户 数量 增加 每 秒 单 击 量 的 变化 过 程 ,从 而 了 解 在 当前 
负载 下 系统 承受 的 单 击 量 峰值 。 相 对 于 Overlay 方式 ,两 张 图 的 线条 不 会 重症 在 一 起 ,看 
起 来 更 加 清楚 。 

加 Correlate。 

这 个 合并 比较 复杂 ,首先 将 主 图 的 Y 轴 变 为 X 轴 , 而 被 合并 图 的 立轴 依然 保存 为 了 
轴 , 按 照 各 图 原本 的 时 间 关系 进行 合并 形成 新 图 。 

例如 将 Running Vusers 和 Transactions per Second 两 张 图 进行 Correlate 合并 ,如 
图 16-42 所 示 。 

系统 将 Running Vusers 图 的 Y 轴 作 为 新 图 的 X 轴 , 将 Transactions per Second 图 
的 Y 轴 作 为 新 图 的 Y 轴 。 在 通过 Correlate 方式 合并 后 的 图 中 ,可 以 更 加 清晰 地 看 出 用 
户 变化 导致 处 理 能 力 的 变化 过 程 ,斜率 越 大 说 明 影响 越 大 ,方便 快速 定位 在 何 种 负载 下 系 
统 响 应 时 间 能 够 稳定 ,而 在 何 种 负载 下 响应 时 间 会 大 幅 上 升 。 
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图 16-42 Correlate 的 Merge 方式 


通过 这 几 种 常见 的 Merge 方 法 ,可 以 将 相关 计数 器 得 到 的 图 进行 合并 分 析 , 找 出 系 
统 性 能 的 瓶 陆 。 由 于 系统 瓶颈 的 定位 需要 大 量 的 相关 知识 ,对 于 一 个 初级 性 能 测试 工程 
师 来 说 ,并 不 要 求 有 性 能 结果 分 析 和 性 能 瓶颈 定位 的 能 力 。 初 级 性 能 测试 工程 师 可 以 将 
数据 整理 后 提交 给 项 目 经 理 、 网 络 或 数据 库 管理 员 , 让 他 们 帮助 你 分 析 数 据 ,并 确认 及 完 
成 性 能 调 优 工作 。 

(2) Auto Correlate( 自 动 定 位 瓶颈 ) 。 

Auto Correlate 提供 了 自动 分 析 趋 势 影 响 的 功能 ,通过 它 可 以 方便 地 找 出 哪些 数据 
之 间 有 明显 的 相互 依赖 性 ,通过 图 和 图 之 间 的 关系 确认 系统 资源 和 负载 相互 影响 的 关系 。 

首先 找到 需要 自动 关联 的 图 , 单 击 右键 打开 Auto Correlate 菜单 。 例 如 选择 从 
Running Vusers 图 上 做 自动 关联 ,如 图 16-43 所 示 。 

弹出 自动 关联 窗口 ,如 图 16-44 所 示 , 需 要 进行 以 
下 设置 。 

OD Time Range: 设置 关联 的 时 间 范 围 标签 。 

Suggest Time Range by 提供 了 自动 关联 的 范围 参 
考 , 可 以 选择 Trend 基于 趋势 或 者 选择 Feature 基于 特 
征 两 种 方式 。 这 两 种 方式 可 以 自动 选择 关联 的 范围 ， 
Trend 完整 包含 所 有 值得 注意 、 分 析 的 趋势 ,而 Feature 
则 是 其 间 一 个 单独 的 片段 。 例 如 这 里 选择 Feature, 如 
图 16-45 所 示 。 

右 侧 的 竖 线 就 会 换 到 6min 的 位 置 , 因 为 从 0min 到 6min 是 用 户 负载 上 升 的 阶段 ,这 
个 阶段 的 特征 就 是 增加 。 通 过 单 击 Next 按钮 可 以 切换 到 下 一 个 特征 ,下 一 个 特征 是 
6min40s 至 7min04s 的 负载 下 降 阶段 ,如 图 16-46 所 示 。 

可 以 通过 拖 动 图 中 的 两 根 竖 线 来 确定 关联 的 范围 或 直接 修改 From 后 的 时 间 来 调整 
关联 的 范围 。 这 样 就 确认 了 希望 关联 的 时 间 范 围 ,接着 需要 设置 被 关联 的 对 象 。 


图 16-43 Auto Correlate 
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16-45 ”Auto Correlate 设置 基于 Feature 特征 的 时 间 方 式 
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图 16-46 Auto Correlate 设置 基于 Feature 特征 的 时 间 方 式 切换 


@ Correlation Options 。 

切换 到 Correlation Options 标签 ,这 里 列 出 了 所 有 和 当前 图 可 以 进行 关联 的 对 象 , 默 
认 选 择 了 三 个 资源 图 ,用 户 也 可 以 自行 设置 需要 关联 的 图 ,另外 可 以 在 Data Interval 中 
设置 数据 点 的 间隔 和 Output 中 的 输出 情况 ,如 图 16-47 所 示 。 
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图 16-47 Auto Correlate 关联 选项 


185 


《软件 测试 理论 与 技术 》 


Data Interval 是 指 自动 关联 的 数据 间隔 ,默认 为 5min, 也 可 以 手工 设 定 关联 的 数据 
间隔 。 间 隔 的 时 间 设 置 越 小 得 出 的 关联 匹配 度 越 精确 。 

Output 是 对 输出 关联 结果 的 设置 ,可 以 选择 设置 显示 和 被 关联 图 匹配 值 最 高 的 5 个 
对 象 ,也 可 以 设置 显示 所 有 被 关联 图 匹配 值 大 于 50% 的 对 象 。 

这 里 修改 Select measurement categories 选择 对 象 为 Hits per Second ,其 他 选项 保持 
默认 值 ,确定 后 得 到 最 终 的 自动 关联 结果 ,如 图 16-48 所 示 。 


Auto Correlated Graph 
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图 16-48 Auto Correlate 关联 结果 


在 结果 中 可 以 看 到 用 户 数量 增加 和 每 秒 单 击 量 的 关系 ,这 和 做 一 个 Run Vuser 和 
Hits per Second 计数 器 的 overlay 型 的 Merge 操作 没什么 区 别 。 但 在 面 的 数据 中 可 以 看 
到 Collrelation Match 数据 项 ,这 个 项 目 是 自动 关联 独 有 的 。Correlation Match 是 指 关 联 
匹配 度 , 该 值 反 映 了 主 数据 和 被 关联 数据 的 近似 度 。 这 里 Hits per Second 和 被 关联 图 
Running Vuser 的 近似 度 为 95% ,也 就 是 说 这 两 个 数据 变化 的 规律 非常 接近 。 

通过 单 击 右上 角 的 Settings 按钮 可 以 重新 设置 自动 关联 选项 。 通 过 设置 Correlation 
Options 下 的 Data Interval 和 Output 来 改变 自动 关联 的 结果 ,找到 和 被 关联 对 象 波 动 接 
近 的 对 象 , 进 一 步 分 析 各 个 数据 间 的 影响 关系 ,从 而 确认 瓶颈 产生 的 原因 。 

Auto Correlation 与 Merge 的 区 别 在 于 : Merge 不 能 “ 选 定 特定 的 时 间 进 行 切 片 ”, 可 
先 用 Merge 看 整体 趋势 .分 析 全 局 。 找 到 恰当 的 位 置 后 ,再 使 用 Auto Correlation 切片 ， 
进一步 分 析 。Merge 的 输出 没有 Correlation Match 这 个 值 ( 即 使 使 用 了 Merge 的 
Correlate 选项 ) ,也 没有 Correlation 值 来 说 明 两 个 数据 间 的 关系 。Merge 一 次 只 能 对 一 
张 图 做 合并 操作 ,而 Auto Correlation 可 以 一 次 对 多 张 图 做 合并 操作 。 
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16.4 本 章 小 结 


到 这 里 为 止 , 完 成 了 对 Analysis 的 介绍 。Analysis 是 一 个 十 分 优秀 的 数据 收集 和 整 
理 维护 工具 ,本 章 只 是 简单 地 介绍 了 Analysis 的 一 些 常 见 操 作 , 大 家 可 以 进一步 研究 如 
何 对 图 进行 一 些 显示 和 注释 的 设置 ,加 强 测试 报告 数据 的 可 读 性 和 美观 性 。 人 性 能 瓶颈 的 
定位 和 分 析 是 一 个 非常 复杂 的 过 程 , 首 先 需要 明白 每 个 数据 的 含义 才能 进一步 发 现 数据 
间 的 关系 ,最 终 定位 系统 的 短 板 , 在 修复 短 板 后 再 次 进行 性 能 测试 ,寻找 下 一 块 短 板 ,如 此 
往复 。 
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针对 Web 应 用 而 言 , 响 应 时 间 会 略微 复杂 一 些 。 

Web 应 用 的 基础 是 超 文本 传输 协议 (Hyper Text Transfer Protocol, HTTP) 和 超 文 
本 标记 语言 (Hyper Text Marketed Language, HTML),HTTP 协议 是 一 种 面向 连接 的 
协议 ,HTML 语言 则 是 一 种 用 于 制作 超 文本 文档 资料 的 简单 标记 语言 。 由 于 这 两 种 协议 
本 身 具 有 的 特性 ,一 个 Web 界面 的 请 求 过 程 会 更 为 复杂 一 些 。 

在 非 Web 应 用 中 ,“ 请 求 " 和 “返回 数据 "都 被 当 作 原 子 操作 来 考虑 ,但 是 如 果 考 虑 
Web 应 用 本 身 的 特点 ,对 一 个 界面 而 言 ,“ 请 求 " 和 “返回 数据 ”都 可 能 是 多 次 发 生 的 。 由 
于 HTTP 对 浏览 器 下 载 资源 的 并 发 请 求 数量 、cache 等 方面 都 进行 了 定义 和 限制 ,以 及 浏 
览 器 对 于 HTML 的 处 理 过 程 ,用 户 所 感受 到 的 响应 时 间 中 相当 大 的 一 部 分 并 不 完全 取 
决 于 应 用 的 后 台 人 处 理 所 需 的 时 间 , 而 取决 于 在 Web 应 用 的 前 端 (Web Frontend)。High 
Performance Web Sites 一 书 中 指出 ,在 Yahoo 中 ,至 少 50 个 团队 通过 纯粹 的 前 端 性 能 相 
关 的 技巧 ,将 最 终 用 户 的 响应 时 间 减 少 了 25% 以 上 。 

基于 HTTP 和 HTML 在 Web 应 用 中 所 扮演 的 重要 角色 ,在 讨论 Web 前 端 性 能 之 
前 , 先 来 对 HTML 和 HTTP 进行 简单 的 描述 。 如 需 了 解 HTML 和 HTTP 的 细节 ,请 参 
阅 相应 文档 。 


17.1 HTTP 协议 基础 理论 


HTTP 用 于 传送 WWW 方式 的 数据 ,该 协议 采用 了 请 求 /响应 模型 。 在 每 次 交互 过 
程 中 ,客户 端 向 服务 器 发 送 一 个 请 求 , 请 求 头 包括 请 求 的 方法 `URI\ 协 议 版 本 ,以 及 包含 
请 求 修饰 符 、 客 户 信息 和 内 容 的 类 似 于 MIME 的 消息 结构 。 服 务 器 以 一 个 状态 行 作为 响 
应 ,响应 的 内 容 包括 消息 协议 的 版 本 ` 成 功 或 者 错误 编码 加 上 包含 服务 器 信息 、 实 体 元 信 
息 以 及 可 能 的 实体 内 容 。HTTP 本 身 是 一 种 非 面向 连接 的 协议 ,每 个 HTTP 请 求 之 间 
都 是 独立 的 。 

通常 HTTP 消息 包括 客户 端 向 服务 器 发 送 的 请 求 消 息 和 服务 器 向 客户 端 发 送 的 响 
应 消息 。 这 两 种 类 型 的 消息 均 由 一 个 起 始 行 、 一 个 或 者 多 个 头 域 、. 一 个 指示 头 域 结束 的 空 
行 和 可 选 的 消息 体 组 成 。 


17.1.1 HTTP 协议 结构 


HTTP 报 文 由 客户 端 到 服务 器 的 请 求 和 从 服务 器 到 客户 端的 响应 构成 。 


第 17 章 贰 二 


1. 请 求 报 文 的 格式 


请 求 报 文 的 格式 如 下 : 
请 求 行 ”通用 信息 头 ”请 求 头 。 实体 头 。 报 文 主体 


请 求 行 的 格式 为 
Method[ 分 隔 符 ]Reqoest- URI[ 分 隔 符 ]HTTP- VersionCRIF 


说 明 如 下 : 

(1) Method 表示 完成 Request-URI 的 方法 ,该 字段 是 大 小 写 敏 感 的 ,包括 
OPTIONS.GET .HEAD.POST.PUT.DELETE 和 TRACE。 方法 GET 和 HEAD 应 该 
被 所 有 的 通用 Web 服务 器 支持 ,其 他 方法 的 实现 则 是 可 选 的 。GET 方法 取 回 由 
Request-URI 标识 的 信息 ,指示 可 以 在 响应 时 不 返回 消息 体 。POST 方法 可 以 请 求 服务 
器 接收 包含 在 请 求 中 的 实体 信息 ,可 以 用 于 提交 表单 等 发 送 消息 。 

(2) [分 隔 符 ] 为 空格 。 

(3) Request-URI 遵循 URI 格 式 ,此 字段 为 星 号 (* ) 时 ,说 明 请 求 并 不 用 于 某 个 特定 
的 资源 地 址 ,而 是 用 于 服务 器 本 身 。 

(4) HTTP-Version 表示 支持 的 HTTP 版 本 ,如 HTTP/1.1。 

(5) CRLF 表示 换行 回 车 符 。 

HTTP 的 头 包括 通用 信息 头 . 请 求 头 .响应 头 和 实体 头 4 部 分 。 每 个 头 域 由 一 个 域 
名 .冒号 (: ) 和 域 值 3 部 分 组 成 。 域 名 是 大 小 写 无 关 的 ; 域 值 前 可 以 添加 任何 数量 的 空格 
符 。 每 个 HTTP 请 求 可 以 包含 多 个 HTTP 头 域 。 

HTTP 报 文 主体 则 包含 了 HTTP 请 求 的 内 容 。 对 于 GET 等 方法 来 说 , 报 文 主体 为 
空 ; 对 于 POST 方法 来 说 , 报 文 主体 则 包含 需要 发 送 给 服务 器 的 数据 。 


2. 响应 报 文 的 格式 


响应 报 文 的 格式 为 
状态 行 ”通用 信息 头 ”响应 头 实体 头 。 报 文 主体 


状态 行 由 状态 码 和 原因 分 析 两 部 分 构成 。 其 中 ,状态 码 由 三 位 数字 组 成 ,表示 请 求 是 
否 被 理解 或 被 满足 ,用 于 支持 自动 操作 ;原因 分 析 是 对 原文 的 状态 码 作 简短 的 描述 ,用 来 
供用 户 使 用 。 

响应 报 文中 的 状态 码 在 进行 Web 应 用 性 能 测试 的 过 程 中 经 常 遇 到 ,说明 如 下 。 

(1) 1xx: 信息 响应 类 ,表示 接收 到 请 求 并 且 继续 处 理 。 

(2) 2xx: 处 理 成 功 响应 类 ,表示 动作 被 成 功 接收 、 理 解 和 接受 。 

(3) 3xx: 重 定向 响应 类 ,表示 为 了 完成 指定 的 动作 ,必须 接受 进一步 处 理 。 

(4) 4xx: 客户 端 错误 ,表示 客户 请 求 包含 语法 错误 或 不 能 正确 执行 。 

(5) 5xx: 服务 端 错误 ,表示 服务 器 不 能 正确 执行 一 个 正确 的 请 求 。 
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响应 头 则 给 出 了 服务 器 本 身 的 一 些 信息 ,返回 的 HTML 或 其 他 数据 内 容 包含 在 报 
文 主体 中 。 


17.1.2 典型 的 HTTP 请 求 与 响应 分 析 


一 个 典型 的 HTTP 请 求 如 下 (Firefox 发 出 的 针对 images. google. com. hk 的 请 求 ): 


GET http://images.google.om-hk/ HTTP/1.1 

Host: images.google.ccmhk 

User- Pgent: Mbzilla/5.0 (Windows; U; Windows NT 5.1; zh- ON; IV:1.9.2.13) Gecko/20101203 

Firefox/3.6.13(.NET CIR 3.5.30729) 

Rccept:text/html,applicaticn/xhtml+ xml,application/yml;q=0.9,* /*; 0.8 

RPRccept- Language: zh- on,zh;q= 0.5 

BRccept- Enooding: gzip,deflate 

RPRccept- Chaarset: GB2312,utf- 8;q= 0.7, * ;=0.7 

Keep- Alive: 115 

Connecticn: keep- alive 

Cookie: 

PFEF= ID= f38e6b9de2b0a6a:U= e5b3ac99113a3c04:FF= 1:ID= zh- CN:NWF 1:TMF= 1292421465:IM= 1292421465:S= 

YzbGTkhYZ5dMh3DP; 

NID= 41= hEcfzqNP9YEj8- 1]KiH9qMbojYrLIdbzvrkodqHKSxNgsVR oaigbgTeVKv5tecgle 

MIUURxfrYapemvNkbkfBysi2470s2HHol3HwgmuToWUiYmGLURRhZbz- G3pozlP 

该 请 求 的 第 一 行 指出 了 该 请 求 是 一 个 HTTP/1. 1 协议 的 请 求 ,请 求 的 方法 是 GET， 
请 求 的 URI 是 http://images. google. com. hk 。 接 下 来 的 头 信息 包含 了 许多 由 骨 号 隔 开 
的 头 信 息 对 ,用 于 指示 浏览 器 期 望 接收 的 页 面 信息 、 浏 览 器 本 身 的 信息 和 cookie 信息 等 。 
其 中 用 粗 体 突出 显示 的 是 与 前 端 性 能 相关 的 内 容 。 

针对 该 请 求 , 服 务 器 给 出 的 响应 如 下 ， 


HTTP/1.1 302 CK 

Location: http://images.google.om.hk/imgcat/imghp?hl= zh- CN 
Cache— Control: private 

Content- Type: text/html; charset= UIF- 8 

Date: Sat, 18 Dec 2010 08:35:42 GMT 

Server: gws 

Content- Length: 246 

X- XSS— Protection: 1; mode=block 


本 响应 的 HTTP 返回 码 是 302, 告 诉 浏览 器 接 下 来 需要 跳 转 到 另 一 个 地 址 (Location 
指示 的 新 地 址 ) 去 获取 HTML 文档 。 状 态 行 之 下 是 响应 头 部 分 ,与 请 求 头 一 样 , 也 包含 
了 一 些 用 冒号 隔 开 的 响应 头 信息 ,包括 服务 器 类 型 等 信息 。 

当 浏 览 器 根据 响应 的 指示 访问 新 地 址 时 ,得 到 的 响应 信息 如 下 


HITP/1.1 200 CR 
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Content- Type: text/html; charset— UTEF- 8 
Content- Encoding: gzip 

Transfer- Encoding: chunked 

Date: Sat，18 Dec 2010 08:35:42 MT 
Eopires: Sat, 18 Dec 2010 08:35:42 QT 
Cacher- Control: private, mex- age= 0 

X- Content— Type— Options: nosniff 

X- Frame— Options: SAMECRIGIN 

X— X53S— Protection: 1; mode=block 
Server: GSE 


[…HmML 文档 内 容 …] 
响应 头 信息 中 用 粗 体 字 标识 的 部 分 是 与 前 端 性 能 相关 的 部 分 。 


17.1.3 与 前 端 性 能 相关 的 头 信息 


HTTP 请 求 和 响应 头 的 某 些 信息 是 与 前 端 性 能 直接 相关 的 ,下 面 详细 介绍 这 些 相 关 
的 头 信息 。 


1. Accept-Encoding 


Accept-Encoding 是 浏览 器 发 出 的 请 求 头 中 包含 的 头 信息 域 之 一 ,用 于 高 速 服 务 器 所 
接收 的 页 面 文件 的 编码 方式 ,如 Accept-Encoding: gzip,deflate 就 是 高 速 服务 器 ,浏览 器 
能 够 接收 不 压缩 和 使 用 gzip 压缩 两 种 方式 的 页 面 内 容 。 页 面 压 缩 和 不 压缩 到 底 能 带 来 
多 大 的 性 能 差距 ? 不 妨 用 ab 工具 来 做 个 简单 的 实验 。 

这 次 选择 新 浪 网 (www. sina. com. cn) 的 首页 作为 测试 对 象 。 

首先 ,要 求 非 压缩 后 的 页 面 ,命令 行 如 下 : 


ab -nl1-clhttp://www.sina.com.cn/ 


结果 如 下 : 

Server Software: PRpache/2.0.54 
Server Hostname: Www-Sina.ccmCn 
Server Port: 80 

Document Path: x 

Document Length: 526 765B 


Failed requests: 0 
Write errors: 0 
Total transferred: 527 22B 
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HIML transferred: 526 765B 
Requests per second: ”0.20 [#/sec] (mean) 


Time per requeat: 5015.625 fms] (mean) 
Time Per request: 5015.625 [ms] (mean, across all concurrent requests) 
Transfer rate: 102.48 [kB/s] received 


Connecticn Times/ms 
min mean [+/-sd] median max 


Connect: 31 31 0.0 31 强 
Processing: 4984 4984 0.0 4984 4984 
Waiting: 31 31 0.0 31 31 
Total: 5015 5015 0.0 5015 5015 


从 结果 中 可 以 看 出 ,获得 的 新 浪 首页 HTML 文档 大 小 为 526 765 字 节 ,从 发 出 请 求 
到 接收 完整 HTML 文档 耗 时 5. 156 25s, 从 时 间 分 布 上 来 看 ,页面 下 载 时 间 占 响应 时 间 的 
绝 大 部 分 。 

接 下 来 在 命令 行 中 添加 Accept-Encoding: gzip, deflate 语句 ,请 求 头 告诉 服务 器 发 
送 压 缩 后 的 页 面 , 命 令 行 如 下 : 


ab- nl- cl-H "Acospt— Encoding:gzipydeflaterhtbp://www.sina.ccom.cn/ 


结果 如 下 : 

Server Software: Bpache/2.0.54 
Server Hostname: WW.Sina.om.an 
Server Port: 80 

Document Path: 天 

Document Length: 117531B 


Failed requests 0 

Write errors: 0 

Total transferred: 118 002 B 

HIML transferred: 117531B 

Requests Per second: 0.79 [#/sec] fmean) 

Time Per request: 2 625 [ms] (mean) 

Time Per request: 12 653 625 [ms] (mean，across all concurrent requests) 
Transfer rate: 90.86 [kB/s] received 
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Processing: 12 341 234 0.0 12 3 234 
Waiting: 31 31 0.0 31 31 
Total: 1265 1265 0.0 1265 1265 


从 结果 可 以 看 到 ,响应 时 间 变 成 了 1. 265 625s, 减 少 的 时 间 即 是 下 载 所 需 时 间 , 虽 然 
实际 上 后 一 次 网 络 下 载 速度 小 于 前 一 次 ,但 由 于 页 面 大 小 从 526 765 字 节 减 小 到 了 
117 531 字 节 ,因此 下 载 所 需要 的 时 间 从 5s 多 减少 到 了 1. 2s。 从 这 里 可 以 看 出 ,服务 器 
端 对 每 一 个 页 面 为 支持 gzip 压缩 的 浏览 器 生成 压缩 后 的 页 面 多 么 重要 。 


2. Connection 


HTTP 是 一 种 非 面 向 连接 的 、 无 状态 的 协议 。 每 一 个 HTTP 请 求 与 其 他 HTTP 请 
求 都 是 完全 独立 的 ,因此 从 理论 上 来 说 ,每 一 个 HTTP 请 求 都 会 经 历 一 个 “建立 连接 一 一 
请 求 页 面 或 资源 一 一 获得 页 面 或 资源 一 一 断 开 连接 ”的 过 程 。 但 建立 和 断 开 连接 需要 一 
定 的 时 间 和 资源 开销 ,对 于 非常 小 的 页 面 和 资源 文件 来 说 ,很 可 能 建立 连接 所 消耗 的 时 间 
甚至 大 于 页 面 或 资源 的 处 理 时 间 。 为 了 让 响应 时 间 尽 可 能 缩短 ,HTTP 引入 了 持久 连 
接 。 如 果 浏 览 器 与 服务 器 约定 了 持久 连接 , 当 某 个 资源 文件 或 是 HTML 文档 传输 完成 
后 ,连接 并 不 立即 关闭 ,而 是 等 待 一 段 时 间 ,在 这 段 时 间 内 如 果 需 要 传输 其 他 资源 文件 或 
HTML 文档 , 则 复 用 该 连接 ;只 有 在 一 段 时 间 内 没有 任何 传输 需要 发 生 时 , 才 关闭 该 

用 于 控制 持久 连接 的 HTTP 请 求 头 就 是 Connection。 当 Connection 的 值 设 定 为 
keep-alive 时 ,浏览 器 与 服务 器 之 间 约 定 使 用 持久 连接 。 


3. Expires 


HTTP 响应 数据 头 中 包含 一 个 Expires 域 , 该 域 的 值 用 于 返回 数据 的 到 期 时 间 。 例 
如 ,17.1.2 节 中 给 出 的 HTTP 响应 头 中 包含 Expires: Sat,18 Dec 2010 08:35:42GMT 
信息 ,这 就 是 服务 器 告诉 浏览 器 ,返回 的 HTML 文件 内 容 到 2010 年 12 月 18 日 8 点 
35 分 42 秒 到 期 (GMT 时 间 ) 。 

在 日 常 使 用 浏览 器 时 ,通常 都 会 感觉 某 个 页 面 在 第 一 次 打开 时 的 速度 特别 慢 , 这 是 因 
为 浏览 器 的 缓存 机 制 在 起 作用 。 但 是 缓存 机 制 究 竟 是 如 何 工作 的 呢 ? 浏览 器 怎么 知道 什 
么 时 候 该 使 用 缓存 中 的 数据 ,什么 时 候 该 从 服务 器 上 重新 取 数 据 呢 ?Expires 头 给 出 的 
信息 就 是 一 句 : 当当 前 时 间 小 于 Expires 指定 的 时 间 时 ,浏览 器 从 缓存 中 直接 获取 响应 的 
资源 文件 或 HTML 文档 ;而 当当 前 时 间 大 于 Expires 指定 的 时 间 时 ,浏览 器 向 服务 器 的 
发 送 请 求 获取 该 资源 。 

17.1.2 节 中 给 出 的 HTTP 响应 示例 中 ,响应 头 中 Date 和 Expires 的 内 容 相同 ,都 是 
Sat,18 Dec 2010 08:35:42GMT,Date 指示 的 是 请 求 返回 时 的 当前 时 间 ,Expires 设置 为 
与 Date 时 间 一 样 ,不 是 不 能 使 用 缓存 了 吗 ? 的 确 是 这 样 的 ,由 于 某 些 原因 ,Google 希望 
浏览 器 每 次 重新 获取 http://images. google. com. hk/imgcat/imghp? hl 一 zh-CN 页 面 的 
内 容 。 而 对 于 页 面 上 的 图 片 ,在 第 一 次 访问 页 面 时 ,其 中 某 图 片 文件 的 HTTP 相应 内 容 
如 下 : 
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Content- Type: image/jpeg 

Iast- Modified: Tue, 15 Sep 2009 22:22:42 GMT 

Date: Sat, 18 Dec 2010 13:09:32 MT 

Expires: Sun, 18 Dec 2011 14:03:20 QT 

X- Content- Type- Options:nosniff 

Server: sffe 

Content- Length: 4225 

X- XSS— Protection: 1; mode=block 

Cache— Control: public, max- age= 31536000 

可 以 看 到 ,对 该 图 片 设置 的 Expires 时 间 为 返回 页 面 时 间 的 1 年 之 后 。 因 此 ,在 第 二 
次 访问 images. google. com. hk 首页 时 ,所 有 的 图 片 文件 都 是 直接 从 缓存 中 获取 的 。 


17.2 浏览 器 访问 URL 原理 


不 同 浏览 器 的 工作 方式 不 完全 一 样 ,大 体 上 ,浏览 器 的 核心 是 浏览 器 引擎 (Browser 
Engine) ,目前 市 场 占有 率 最 高 的 几 种 浏览 器 几乎 都 使 用 了 不 同 的 浏览 器 引擎 : IE 使 用 
的 是 Trident,Firefox 使 用 的 是 Gecko、Safari 和 Chrome 使 用 的 则 是 Webkit。 不 同 浏览 
器 引擎 对 W3C 规范 的 支持 不 尽 相 同 ,在 具体 功能 的 实现 上 也 不 完全 一 致 。 因 此 ,除了 一 
些 特别 限制 的 区 别 外 ,本 节 不 会 着 重 讨论 各 个 浏览 器 引擎 之 间 的 差异 ,而 是 主要 描述 浏览 
器 从 输入 URL 地 址 开始 到 页 面 完全 可 用 的 大 致 过 程 。 


17.2.1 连接 到 URL 服务 器 


用 户 在 地 址 栏 中 输入 一 个 URL, 按 Enter 键 后 浏览 器 打开 该 URL ,浏览 器 做 的 第 一 
件 事 就 是 寻找 该 URL 所 在 网 站 的 IP 地 址 。 然 后 ,浏览 器 向 该 地 址 发 起 连接 请 求 , 建 立 
到 服务 器 的 连接 。 


17.2.2 获取 页 面 对 应 的 HTML 文档 


当 建 立 连接 后 ,浏览 器 向 服务 器 发 送 HTTP 请 求 , 请 求 URL 对 应 的 HTML 文档 。 
不 管 请 求 的 URL 是 一 个 静态 的 HTML 文件 ,还 是 一 个 动态 脚本 (ASPX、PHP 或 JSP)， 
服务 器 返回 给 浏览 器 的 一 定 是 一 个 HTML 文档 。 该 HTML 文档 就 是 浏览 器 需要 呈现 
的 页 面 。 


17.2.3 解析 文档 并 获取 所 需要 的 资源 
浏览 器 在 获取 HTML 文档 后 会 对 文档 进行 解析 ,目的 是 知道 该 页 面 需 要 哪些 资源 


以 及 生成 DOM 树 。 生 成 DOM 树 的 工作 与 下 载 页 面 上 需要 的 其 他 资源 同时 进行 。 大 致 
来 说 ,浏览 器 会 逐 行 分 析 HTML 文档 ,一 旦 发 现 一 个 标签 ,就 会 根据 标签 的 要 求 分 配对 
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指定 资源 的 下 载 。 当 DOM 树 生成 后 ,DOMContentLoaded 事件 被 触发 (IE 没有 实现 
DOMContentLoaded 事件 ) 。 

比较 有 趣 的 是 浏览 器 下 载 资 源 的 过 程 。 首 先 , 理 论 上 浏览 器 并 行 下 载 页 面 需要 的 所 
有 资源 会 带 来 最 好 的 性 能 体验 ,但 由 于 服务 器 要 保证 对 尽 可 能 多 的 用 户 的 支持 ,因此 
HTTP/1.1 规定 了 每 个 客户 端 (浏览 器 ) 只 能 与 每 个 服务 器 建立 两 个 连接 。 在 HTTP/ 
1.1 诞生 的 年 代 , 由 于 服务 器 处 理 能 力 的 限制 ,这 个 限制 自然 是 合理 的 。 但 随 着 互联 网 技 
术 的 发 展 ,服务 器 处 理 能 力 的 提高 以 及 负载 均衡 的 大 量 应 用 ,该 限制 就 显得 不 那么 合理 
了 。 因 此 ,在 较 新 版 本 的 浏览 器 中 ,大 多 没有 严格 遵循 该 限制 ,如 Firefox 3. 6. 13 中 文 版 
默认 将 每 个 服务 器 的 连接 数 限制 为 6 个 。 但 不 管 具体 的 数量 如 何 , 该 并 发 的 限制 确实 是 
存在 的 。 

其 次 ,并 非 所 有 的 元 件 都 可 以 被 并 行 下 载 。 一 般 情况 下 ,页 面 中 包含 两 类 需要 被 执行 
的 JavaScript 脚本 ,一 类 是 直接 用 二 script 二 标签 标识 的 内 骨 JS 语句 ; 另 一 类 则 是 引用 的 
外 部 JS 文件 。 由 于 浏览 器 需要 按照 JS 遵循 其 在 HTML 文档 中 的 顺序 来 执行 JS, 在 较 
早 的 浏览 器 (如 IE 6 和 IE 7,Firefox 3.5 以 前 的 版 本 ) 中 , 当 JS 文 件 下 载 时 ,页 面 上 其 他 
所 有 资源 的 下 载 均 会 被 阻塞 ,只 有 当 JS 文件 下 载 并 执行 完成 后 ,浏览 器 才 继续 下 载 页 面 
上 的 其 他 资源 。 


17.2.4 onload 事件 


当 HTML 文档 解析 完成 ,生成 了 DOM 树 , 所 有 页 面 需 要 的 资源 文件 都 已 经 成 功 下 
载 和 执行 (对 于 JavaScript 文件 ) 后 ,浏览 器 会 发 出 onload 事件 并 回调 HTML 文档 中 的 
onload 函数 。 

对 浏览 器 来 说 ,onload 事件 是 最 接近 页 面 就 绪 的 时 间 , 因 此 ,许多 前 端 性 能 工具 都 会 
把 onload 事件 作为 一 个 显著 的 标识 。 在 Firebug 给 出 的 结果 中 ,红色 线条 指示 的 就 是 
onload 事件 被 触发 的 时 间 点 。 在 HttpWatch 工具 中 ,同样 用 红色 的 线条 标识 onload 事 
件 得 到 发 生 。 

但 是 ,是 不 是 onload 事件 执行 完成 就 标志 着 页 面 已 经 就 绪 , 用 户 可 以 在 其 上 进行 操 
作 了 ? 并 非 如 此 。 因 为 在 onload 执行 完成 后 ,页 面 上 可 能 还 有 一 些 JavaScript 脚本 需要 
在 其 后 运行 。 在 大 量 应 用 Ajax 技术 的 网 页 上 ,onload 执行 完成 后 页 面 仍然 没有 完全 就 
绪 的 情况 非常 常见 ,例如 , 当 onload 执行 完成 后 利用 页 面 上 的 JavaScript 发 送 Ajax 请 
求 , 拿 到 请 求 的 返回 结果 后 再 修改 某 些 DOM 元 素 , 以 达成 用 户 观 感 上 的 提速 。 


17.3 ”如 何 提 高 Web 前 端的 性 能 


在 17. 2 节 中 ,详细 分 析 了 浏览 器 打开 URL 的 过 程 。 从 该 过 程 的 描述 中 可 以 看 到 ， 
要 提升 前 端的 性 能 ,有 两 大 思路 : 

(1) 减少 页 面 加 载 需要 的 时 间 。 

(2) 提升 用 户 的 观感 ,让 用 户 觉得 页 面 更 快 (对 于 纯粹 的 数据 展示 页 面 ,可 以 通过 让 
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页 面 尽快 开始 显示 达到 这 样 的 效果 )。 


17.3.1 减少 网 络 时 间 


浏览 器 从 服务 器 获取 HTML 文档 和 资源 都 需要 经 历 *"DNS 解析 一 一 建立 连接 一 一 
获取 内 容 一 一 断 开 连 接 ” 的 过 程 。 如 果 能 够 减少 DNS 解析 和 文件 在 网 络 上 的 传输 时 间 ， 
系统 性 能 自然 会 得 到 提升 。 


1. 使 用 DNS 缓存 技术 


使 用 DNS 缓存 技术 能 够 让 用 户 获得 更 快 的 DNS 解析 时 间 , 当然, 一般 而 言 ,由 于 浏 
览 器 本 身 有 一 定 的 DNS 缓存 机 制 ( 不 同 浏览 器 有 不 同 的 实现 ) ,通常 情况 下 ,服务 端的 
DNS 缓存 并 不 能 带 来 太 大 的 性 能 提升 。 


2. 减 小 需要 传输 文件 的 尺寸 


减少 需要 传输 文件 的 尺寸 是 一 个 提升 性 能 的 方法 。 在 网 络 带 宽 有 限 的 情况 下 ,这 种 
方法 能 带 来 巨大 的 好 处 。 通 过 使 用 gzip 压缩 页 面 ,能 够 有 效 提升 页 面 速度 。 除 了 确保 使 
用 gzip 压缩 页 面 外 ,使 用 混淆 等 方法 尽量 减 小 JS 文件 和 样式 表 的 大 小 ,从 JS 文件 盒 样式 
表 中 去 除 不 需要 使 用 的 部 分 等 ,都 可 以 起 到 减 小 需要 传输 文件 尺寸 的 作用 。 


3. 加 快 文件 传输 速度 


Internet 网 站 的 用 户 通常 会 分 布 在 一 个 较 广 阔 的 区 域 中 。Internet 本 身 的 多 层次 网 
络 结构 导致 了 从 某 些 节 点 到 另 一 些 节 点 之 间 的 可 用 带宽 和 网 络 传 输 速 度 都 比较 慢 , 在 这 
种 情况 下 ,使 用 CDN 技术 ,让 用 户 尽 可 能 访问 到 对 用 户 节 点 而 言 更 快速 的 服务 器 就 可 以 
加 快 文件 传输 速度 。 以 中 国 的 状况 为 例 , 联 通 、 电 信和 移动 三 大 运营 商 之 间 并 没有 建立 很 
好 的 互 连 互通 ,因此 在 网 络 用 户 广泛 分 布 在 这 三 个 运营 商 网 络 的 情况 下 ,通常 需要 在 三 个 
运营 商 所 在 的 网 络 中 设置 GDN 服务 器 。 另 外 ,由 于 地 域 原因 建立 CDN 也 是 一 种 常见 的 
做 法 。 


17.3.2 减少 发 送 请 求 的 数量 


减少 需要 发 送 的 请 求 数量 显然 可 以 提升 性 能 。 在 短 连接 情况 下 ,每 一 个 请 求 都 需要 
经 过 “建立 连接 一 一 发 送 数 据 一 一 断 开 连 接 ” 的 过 程 ,因此 减少 必需 的 请 求 数量 可 以 带 来 
显著 的 性 能 提升 。 即 使 使 用 持久 连续 方式 ,由 于 浏览 器 与 每 个 服务 器 之 间 建 立 的 持久 连 
接 数 量 是 有 限 的 ,减少 必需 的 请 求 数量 也 能 给 性 能 提升 带 来 帮助 。 


1. 利用 浏览 器 缓存 


充分 利用 浏览 器 的 缓存 机 制 可 以 有 效 提升 系统 性 能 。 在 17. 1. 3 节 中 已 经 讨论 了 浏 
览 器 缓存 的 具体 实现 ,为 了 充分 利用 浏览 器 缓存 机 制 , 需 要 在 服务 端 保证 每 个 可 以 被 缓存 
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的 资源 在 被 服务 端 返回 时 附带 合适 的 Expires 头 信息 。 此 外 ,为 了 保证 尽 可 能 多 的 内 容 
可 以 被 缓存 ,也 就 要 求 网 站 尽 可 能 将 页 面 中 较 少 改变 的 部 分 提取 出 来 。 归 纳 而 言 , 以 下 措 
施 有 助 于 充分 利用 缓存 : 

(1) 保证 服务 端 返回 资源 的 响应 头 带 有 Expires 信息 ,使 得 资源 可 以 被 缓存 。 

(2) 用 引用 方式 使 用 样式 表 和 JS 脚本。 如果 使 用 内 肉 的 样式 表 和 JS 脚本 ,每 次 
HTML 文档 的 变化 都 会 导致 样式 表 和 JS 脚本 需要 重新 加 载 ,无 法 充分 利用 缓存 。 当 然 ， 
在 没有 缓存 或 样式 表 与 JS 脚本 经 常 变动 的 情况 下 ,用 引用 方式 使 用 样式 表 和 JS 脚本 反 
而 会 导致 更 多 的 HTTP 请 求 。 

(3) 使 更 多 的 URI 可 以 被 浏览 器 缓存 。 许 多 网 站 使 用 脚本 生成 需要 返回 的 图 片 或 
JS 资源 文件 ,而 该 脚本 所 在 的 URI 又 附带 了 一 些 经 常 变化 的 参数 ,这 就 导致 了 这 些 内 容 
无 法 被 缓存 (缓存 要 求 URI 严格 一 致 )。 例 如 ,如 果 某 网 站 页 面 上 的 图 片 URI 为 http:// 
www. somedomain. com/ getpi?category 二 [categoryid]&pos 二 [position], 若 给 定 图 片 每 
次 的 URI 不同 ,即使 两 个 不 同 的 URI 实际 内 容 是 同一 张 图 片 ,浏览 器 也 无 法 使 用 已 有 的 
缓存 图 片 。 


2. 使 用 合并 的 图 片 文件 


当 页 面 上 包含 许多 小 图 片 文件 时 ,可 以 考虑 将 小 图 片 文件 合并 成 一 个 大 图 片 文件 ,在 
页 面 上 使 用 CSS Sprites 技术 将 大 图 片 显 示 为 分 隔 开 的 小 图 片 。 在 没有 缓存 的 情况 下 ,将 
许多 小 图 片 文件 合并 成 大 图 片 文件 可 以 大 量 减少 HTTP 请 求 数 。 当 然 , 选 择 将 哪些 小 图 
片 合并 成 大 图 片 也 需要 综合 考虑 ,如 果 某 些小 图 片 经 常 变化 ,而 另 一 些 相对 稳定 , 则 不 宜 
将 所 有 小 图 片 合 并 成 大 图 片 ,因为 这 样 会 导致 大 图 片 经 常 改变 ,从 而 无 法 利用 浏览 器 的 组 
存 机 制 。 


17.3.3 提高 浏览 器 下 载 的 并 发 度 


最 简单 的 提高 浏览 器 下 载 并 发 度 的 方法 是 在 浏览 器 上 进行 设置 ,允许 浏览 器 与 每 个 
服务 器 建立 不 限 数量 的 连接 。 但 如 果 浏 览 器 与 某 个 服务 器 建立 了 过 多 的 连接 ,很 可 能 会 
被 服务 器 判定 为 攻击 而 将 其 拉 入 黑 名 单 ; 即 使 服务 器 运行 这 类 操作 ,也 需要 用 户 在 自己 的 
浏览 器 上 进行 设置 ,因此 并 不 是 一 个 好 办 法 。 

更 好 的 方式 是 充分 利用 浏览 器 的 特性 ,在 无 须 修改 任何 浏览 器 设置 的 情况 下 ,达到 更 
好 的 下 载 并 发 度 。 


1. JS 文件 放 在 HTML 文件 的 最 后 


在 某 些 浏览 器 (如 IE 6) 上 ,JS 文 件 的 下 载 和 执行 会 阻止 其 他 页 面 资源 文件 的 下 载 和 
执行 ,直到 JS 文件 下 载 和 执行 完成 后 ,其 他 资源 文件 才 可 以 开始 下 载 和 执行 。 因 此 ,将 
JS 文件 放 在 HTML 文档 的 最 后 可 以 保证 JS 文件 不 会 组 织 任何 其 他 元 素 的 下 载 。 当 然 ， 
在 IE 6 中 ,也 可 以 使 用 一 些 特别 的 技巧 ,例如 使 用 document. write 方法 在 文档 中 写 入 
JavaScript 脚本 ,或 是 将 JavaScript 脚本 以 元 素 处 理 , 使 用 appendChild 方法 加 入 文档 , 达 
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成 浏览 器 并 行 下 载 JS 文件 的 效果 ,这 些 技巧 对 于 提升 前 端 通用 性 有 所 帮助 ,这 需要 程序 
员 仔 细 考 虑 对 页 面 上 的 JS 文件 的 划分 ,然后 使 用 这 些 技 巧 达成 对 性 能 的 提升 。 关 于 让 
JS 文件 并 行 下 载 的 讨论 在 互联 网 上 有 很 多 ,例如 文章 http://blog. rakeshpai. me/2009/ 
03/downloading-javascript-files-in. html 就 详细 介绍 了 这 种 技巧 的 实现 。 


2. 使 用 多 个 域名 


浏览 器 对 服务 器 的 连接 限制 是 基于 域名 的 。 例 如 ,如 果 某 个 服务 器 S 拥有 两 个 域名 
a. com 和 b. com, 在 浏览 器 限定 最 多 与 同一 个 域名 建立 两 个 连接 的 情况 下 ,浏览 器 实际 上 
可 以 与 服务 器 S 建立 4 个 连接 。 相 信 大 家 在 访问 一 些 大 型 网 站 时 会 注意 到 ,大 型 网 站 往 
往 拥 有 几 个 域名 ,例如 ,用 image. xx. com 存放 图 片 文件 等 静态 资源 文件 ;用 stat. xx. com 
放置 用 于 统计 的 JS 脚本 等 。 这 样 可 以 根据 不 同类 型 的 资源 (静态 或 动态 ) ,选择 最 合适 的 
服务 器 进行 部 署 。 例 如 ,Nginxz 在 处 理 静 态 文 件 上 有 绝对 优势 , 那 就 将 所 有 的 静态 资源 
文件 设置 在 一 台 Ngins 服务 器 上 ,而 将 脚本 放 在 其 他 服务 器 上 。 另 一 方面 ,将 页 面 放置 在 
相同 的 服务 器 上 也 可 以 提高 下 载 的 并 发 度 ,从 而 提高 系统 性 能 。 


17.3.4 让 页 面 尽早 开始 显示 


在 17.3.1 节 中 , 提 到 了 JS 文件 和 样式 表 在 不 同 浏览 器 上 对 性 能 有 不 同 的 影响 。 
Steve Souders 的 一 篇 名 为 Frontend SPOP 的 文章 中 给 出 了 一 个 样式 表 、JS 脚本 以 及 
@font-face 类 型 对 页 面 泻 染 的 影响 ,其 部 分 结果 如 表 17-1 所 示 。 

表 17-1 不 同 浏览 器 下 JS、 样 式 表 和 @font-face 的 影响 


前 端 SPOF 测试 Chrome Firefox IE Opera Safari 
外 部 脚本 (JS 脚本 ) 下 部 空白 下 部 空白 下 部 空白 下 部 空白 下 部 空白 
样式 表 下 部 空白 闪烁 下 部 空白 闪烁 下 部 空白 
内 嵌 的 @fontface 延迟 闪烁 闪烁 闪烁 延迟 
带 @font-face 的 样式 表 延迟 闪烁 完全 空白 闪烁 延迟 
带 @font-face 的 脚本 延迟 闪烁 完全 空白 闪烁 延迟 
表 中 各 结果 详细 描述 如 下 : 


(1) 下 部 空白 指 当前 元 素 以 上 的 所 有 其 他 元 素 都 在 屏幕 上 被 显示 出 来 。 

(2) 闪烁 指 DOM 元 素 一 旦 下 载 完 成 就 会 被 显示 出 来 ,但 样式 表 或 自体 下 载 完成 后 
会 导致 页 面 重 画 ,产生 闪烁 。 

(3) 延迟 指使 用 @font-face 类 型 的 文本 直到 字体 下 载 完 成 才 开 始 显示 。 

(4) 完全 空白 指 页 面 上 什么 都 不 显示 ,只 有 一 片 空白 。 

虽然 不 同 的 浏览 器 有 不 同 的 处 理 方式 ,但 从 它们 的 行为 中 可 以 总 结 出 几 个 规律 : 

(1) 当 开始 下 载 和 执行 JS 文件 时 ,页 面 停止 显示 新 的 元 素 。 

(2) 当 载 和 人 样式 表 时 ,页 面 上 要 么 停止 显示 新 的 元 素 , 要 么 出 现 闪 烁 。 
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(3) IE 浏览 器 在 使 用 带 @font-face 类 型 的 样式 表 和 脚本 时 ,用 户 体验 较 差 。 

因此 ,根据 表 17-1 中 的 数据 ,对 所 有 浏览 器 都 有 效 的 测量 是 : 

(1) 将 样式 表 的 引用 放 在 HTML 文档 的 开头 (如 放 在 二 Head 二 标签 中 )。 这 样 可 以 
让 样式 表 在 一 开始 就 被 下 载 下 来 。 一 旦 样式 表 下 载 完 成 ,浏览 器 就 可 以 使 用 样式 表 中 定 
义 的 样式 开始 在 屏幕 上 显示 页 面 元 素 。 另 外 ,也 避免 了 新 样式 可 能 带 来 的 屏幕 显示 的 
重 绘 。 

(2) 将 JS 的 引用 放 在 HTML 文档 的 最 后 。 这 样 JS 文件 的 下 载 和 执行 会 在 所 有 页 
面 下 载 完成 之 后 ,不 会 阻止 其 他 页 面 元 素 的 显示 ,从 用 户 观感 上 来 说 ,JS 文件 的 下 载 和 执 
行 时 间 完 全 不 会 被 用 户 感觉 到 。 


17.3.5 其 他 


前 面 主 要 讨论 例如 提升 前 端 性 能 的 一 些 通用 法 则 。 除 了 这 些 法 则 之 外 ,还 有 更 多 更 
细致 的 针对 JS 或 样式 表 的 具体 技巧 。2010 年 Web 性 能 与 运 维 大 会 (Velocity China 
2010) 在 北京 召开 ,会 上 多 位 业内 重量 级 人 士 发 表 了 面向 前 端 性 能 的 演讲 并 明确 指出 : 前 
端 性 能 是 目前 Web 应 用 性 能 的 一 个 主要 方向 ,前 端 性 能 优化 能 够 带 来 极 大 的 网 站 性 能 提 
升 。 当 然 , 不 好 的 前 端 性 能 对 于 网 站 的 打击 也 是 致命 的 。 


17.4 单机 前 端 性 能 工具 介绍 


本 章 首先 简单 描述 了 HTTP ,阐述 了 浏览 器 打开 URL 的 过 程 ,并 给 出 了 提高 前 端 性 
能 的 一 些 具体 方法 。 但 是 ,如 何 才能 对 一 个 已 有 系统 的 前 端 性 能 状况 进行 性 能 评估 呢 ? 
本 节 就 围绕 单机 前 端 性 能 评估 工具 进行 展开 , 这些 工 具有 : Firebug、 HttpWatch、 
PageSpeed 和 DynaTrace。 


17.4.1 Firebug 工具 


Firebug 工具 是 一 个 备 受 推崇 的 ,强大 的 Web 开发 工具 。 

(1) 它 提供 了 方便 的 查看 页 面 元 素 功能 ,允许 用 户 以 鼠标 指示 、DOM 树 等 方式 查看 
任意 界面 元 素 ; 

(2) 提供 了 JavaScript 控制 台 ,允许 用 户 在 控制 台 直 接 调 试 JavaScript; 

(3) 提供 了 可 视 化 的 CSS 标尺 ,方便 用 户 调整 页 面 布局 ; 

(4) 提供 了 网 络 面板 ,允许 用 户 获取 每 个 页 面 被 加 载 过 程 中 的 页 面 元 素 下 载 和 执行 
效果 。 

除 此 之 外 ,Firebug 工具 同时 还 提供 了 非常 好 的 扩展 ,不 少 好 用 的 工具 就 是 基于 其 扩 
展 而 建立 的 ,如 YSlow 和 Page Speed 工具 。 

接 下 来 的 篇 幅 中 ,人 们 的 关注 点 会 集中 在 Firebug 的 网 络 面板 上 ,探究 如 何 通过 网 络 
面板 评估 前 端 性 能 。 
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Firebug 以 Firefox 的 插件 形式 存在 ,一 旦 在 Firefox 上 安装 Firebug,Firefox 的 “ 工 
具 ” 菜 单 下 会 多 出 一 个 Firebug 的 菜单 项 ,以 下 以 Firebug 2. 0.3 和 Firefox 3. 1.0 为 例 ， 
说 明 Firebug 网 络 面板 的 使 用 方法 。 安 装 完 Firebug 后 , 单 击 菜单 栏 中 的 “工具 ”一 Web 
开发 者 一 Firebug, 打 开 Firebug, 或 者 直接 按 F12. 打 开 Firebug 后 ,其 主 窗口 默认 位 于 浏 
览 器 的 下 半 部 分 ,如 图 17-1 所 示 。 


得 时 《 》 泛 Bi 全 | Hu- cs Bt Do Rm cookies 
局 | i | beey + niml 


图 17-1 Firebug 主 窗 口 


单 击 主 窗口 中 的 “网 络 ? 标 签 ,选择 * 启 用” 网络 面 板 , 即 可 在 Firefox 中 正常 使 用 该 网 
络 面板 。 启 用 网 络 面板 后 ,在 Firefox 的 地 址 栏 中 输入 URL 并 打开 ,就 会 在 该 网 络 面板 
上 显示 本 次 请 求 处 理 的 网 络 细节 。 
图 17-2 是 在 Firefox 中 打开 www. baidu. com 后 在 网 络 面板 中 显示 的 结果 。 
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图 17-2 打开 www. baidu. com 显示 在 网 络 面板 中 的 内 容 


网 络 面板 展示 了 该 页 面 在 浏览 器 处 理 过 程 中 的 所 有 网 络 交 互 、 每 一 个 请 求 的 返回 值 、 
返回 内 容 的 大 小 以 及 相应 的 时 间 线 。 通 过 单 击 网 络 面板 上 的 按钮 还 可 以 按 界面 元 素 的 类 
型 分 类 显示 元 素 的 下 载 情况 。“ 保 持 ” 按 钮 用 于 保持 已 有 的 显示 结果 , 单 击 “ 保 持 ” 按 钮 后 ， 
刷新 页 面 仍 然 会 保留 已 记录 的 请 求 。 

对 于 每 一 个 请 求 , 单 击 左 侧 的 加 号 ,可 以 看 到 该 请 求 的 请 求 头 响应 头 和 是 否 使 用 组 
存 等 信息 。 网 络 面板 中 的 蓝 色 ( 左 侧 ) 和 红色 ( 右 侧 ) 线 条 分 别 表 示 DOMContentLoaded 
事件 发 生 和 onload 事件 触发 的 时 间 点 。 当 DOM 树 生 成 后 ,DOMContentLoaded 事件 立 
即 被 触发 , 蓝 色 线条 指示 的 时 间 点 就 是 该 事件 发 生 的 时 间 点 ; 当 所 有 页 面 元 素 下 载 完成 
后 ,onload 事件 被 触发 .HTML 文档 中 的 onload 函数 被 执行 ,红色 线条 指示 的 是 onload 
事件 被 触发 的 时 间 点 。 然 而 ,无 论 是 DOMContentLoaded 消息 ,还 是 onload 消息 ,都 不 
意味 着 页 面 已 经 完全 就 绪 。 如 果 关 心 用 户 什 么 时 候 能 看 到 页 面 内 容 开 始 泻 染 , 则 可 以 在 
网 络 面板 中 选择 “显示 Paint 事件 命令 。 单 击 * 网 络 ? 标 签 右 侧 的 下 拉 按 钮 ,在 菜单 中 选 
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择 “ 显 示 Paint 事件 ”命令 , 即 可 看 到 该 页 面 上 发 生 的 每 一 次 Paint 事件 的 时 间 点 。 一 个 
Paint 事件 意味 着 页 面 上 的 一 次 绘制 。 
选择 “显示 Paint 事件 ”命令 后 ,再 次 访问 www. baidu. com, 结 果 如 图 17-3 所 示 。 
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CET apwd=amomade 00 0F agerton bad cam B58 19 万 2945 和 1 [EE 

GET super ext_1be2; bdimg.com 加 I 

a GET superioadrtype= 200 OF Dau.com 27(3 L975.217.55:50 1 [ En 

GET mt_min_o0bsdt; bln.com on 

GET vgiomod=super 200 OF sid com 08 S115.186.15260 | 

因 GET personalcontent 。 200 Ok baidu.com 8 11975.217.55:30 | 

BB GET vrmod=euper 700 OF Padi com 08 S153.186 15280 
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图 17-3 选择 “显示 Paint 事件 ”命令 后 的 结果 


17.4.2 HttpWatch 工具 


HttpWatch 工具 是 可 在 IE 和 Firefox 下 使 用 的 网 页 数据 分 析 工 具 。 与 Firebug 不 
同 ,HttpWatch 是 一 个 商业 工具 ,其 提供 了 一 个 Basic 的 免费 版 本 。 对 于 前 端 性 能 而 言 ， 
Basic 免费 版 本 基本 够 用 。 

在 Windows 平台 上 安装 HttpWatch 工具 非常 简单 ,下 载 安装 包 后 直接 执行 即 可 。 
安装 完成 后 ,在 IE 的 “工具 ”菜单 下 会 多 出 一 个 HttpWatch 菜单 项 ,选择 该 项 目 就 可 以 在 
浏览 器 中 打开 HttpWatch 的 主 窗口 。 以 下 以 IE 10 和 HttpWatch Basic 9. 3 为 例 ,说 明 
该 工具 的 使 用 。 如 图 17-4 所 示 是 HttpWatch 工具 的 主 窗口 。 要 开始 使 用 该 工具 ,首先 
需要 单 击 窗口 左上 角 的 Record 按钮 ,然后 在 IE 地 址 栏 中 输入 需要 访问 的 URL。 如 
图 17-5 所 示 是 访问 www. baidu. com 得 到 的 结果 。 建 议 在 页 面 加 载 完 成 后 , 单 击 Stop 按 
钮 停止 录制 ,否则 ,只 要 IE 有 任何 发 出 的 请 求 ,HttpWatch 就 会 将 其 记录 下 来 。 


@Record 国 Sep 园 cear | 回 Vew -全 smmay Q Find -了 Fe -| 园 sae -三 -| 四 Toos-|2Hhep- 


Started ~ Time Chart IP Tme Sent Receved Method Resit Type URL 


| 


Overview |Time Chart | Headers | Cookies Cache | Query String [ POST Data | Content | Steam SSL_ [Warnings [ Comment 


Resuk p: Connection ID: 


Acton Desaipton status 


HttpWarch Basic 93 


17-4 HttpWatch Basic 的 主 窗口 


与 Firebug 类 似 , HttpWatch 工具 给 出 了 浏览 器 请 求 该 URL 过 程 中 发 生 的 全 部 
HTTP 交互 , 列 出 了 每 一 个 元 素 的 HTTP 返回 码 .元 素 大 小 以 及 按照 时 间 序 列 给 出 的 页 
面 元 素 下 载 时 间 等 信息 。 此 外 HttpWatch 在 Page Event 选项 卡 中 还 给 出 了 Render 
Start、Page Load 和 HTTP Load 三 个 时 间 。 其 中 ,Render Start 描述 的 是 浏览 器 开始 演 
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图 17-5 打开 www. baidu. com 后 的 HttpWatch 主 窗口 


染 页 面 的 时 间 ;Page Load 描述 的 是 onload 事件 触发 的 时 间 ;HTTP Load 描述 的 是 页 面 
上 最 后 一 个 请 求 发 送 和 接收 完毕 的 时 间 点 。 这 三 个 时 间 分 别 对 应 Firebug 中 的 第 一 个 
Paint 事件 发 生 时 间 、onload 时间 以 及 收 到 最 后 一 个 HTTP 响应 的 结束 时 间 。 


17.4.3” Chrome 自 带 的 开发 工具 


Chrome 是 Google 公司 推出 的 一 款 浏览 器 产品 ,该 浏览 器 的 主要 特点 是 快速 安全 、 
简介 。 除 此 之 外 ,Chrome 浏览 器 从 创建 之 初 便 自 带 了 许多 方便 开发 工程 师 调 试 的 工具 。 

打开 Chrome 浏览 器 ,选择 “工具 ”一 “开发 者 工具 ”命令 ,在 打开 的 窗口 中 单 击 
Resources 标签 ,允许 对 该 Session 中 的 资源 进行 跟踪 ,在 浏览 器 中 输入 URL 并 访问 。 仍 
然 以 访问 www. baidu. com 为 例 ,在 主 窗口 中 切换 到 Timeline 界面 , 单 击 左上 角 的 圆 形 图 
标 开始 录制 ,就 能 在 工具 中 看 到 录制 时 间 段 内 所 有 浏览 器 产生 的 事件 。 从 图 17-6 中 可 以 
清楚 地 看 到 请 求 发 送 的 时 间 点 ,浏览 器 每 个 事件 发 生 的 时 间 点 以 及 浏览 器 开始 泻 染 的 时 
间 点 ;也 能 看 到 每 次 重 绘 的 Paint 事件 ,甚至 每 次 重 绘 的 屏幕 区 域 都 在 工具 中 进行 了 
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图 17-6 Chrome 自 带 开发 工具 的 Timeline 界面 
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17.4.4 Page Speed 工具 


Page Speed 工具 是 一 个 基于 Firebug 工具 的 前 端 性 能 优化 工具 ,该 工具 由 Google 公 
司 创 建 并 发 布 。PageSpeed 工具 依据 一 些 规则 对 页 面 进 行 检查 ,查找 可 以 优化 的 地 方 并 
给 出 相应 的 建议 。 可 以 从 网 站 https://developers. google. com/speed/pagespeed/ 
insights_extensions? hl 二 en 上 下 载 安 装 Page Speed 插件 ,但 安装 Page Speed 插件 前 , 需 
要 首先 安装 Firebug 插件 。 安 装 Page Speed 插件 后 ,打开 Firebug 主 窗口 , 单 击 Page 
Speed 选项 ,打开 Page 界面 ,如 图 17-7 所 示 。 


页 是 和》 二 HTML Css Ht DOM 网络 cookics | Pagespeed = | 


| [Performance 


Make the web faster 


PageSpeed Insights for Firefox 


What' s new in this version? 


* PageSpeed Insights for Firefox score now hidden by default 
While PageSpeed Insights for Firefox still provides helpful recomendations to speed up 
your site, the nost up to date PageSpeed Insights analysis is not supported in Firefox, 
Please use https://developers. google. con/speed/pagespeed/insights/ for the nost recent 
PageSpeed Insights analysis. To continue to see the old PageSpeed Insights for Firefox 


score, please set the extensions,PageSpeed, show_score preference to true in 
about: conf ig. 


Redesigned welcone page 


See the PageSpeed docunentation for detailed infornation on the rules used to evaluate web 
pages. 


图 17-7 打开 的 Page Speed 界面 


使 用 浏览 器 加 载 一 个 页 面 ,然后 单 击 Page Speed 界面 中 的 Performance 按钮 ,Page 
Speed 会 根据 一 些 预先 定义 的 规则 检查 该 页 面 .提供 可 以 提高 前 端 性 能 的 建议 。 如 图 17-8 
所 示 ,Page Speed 给 出 了 一 个 对 页 面前 端 性 能 的 评分 ,并 详细 列 出 了 每 一 个 检查 项 目的 
结果 以 及 可 能 的 改进 建议 。 单 击 每 个 条 目 左 侧 的 加 号 图 标 可 以 展开 具体 的 条 目 。 


旨 昌 《 》 泛 EN HTML css 加 本 DOM 网 六 cookies | pagespeed ” | 


| [Performance | Resources Export - Help~ 
Expand All| |Collapse All| |Refresh Analysis 


九 | ， 痢 组 JavaScript 解析 
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成 |， 将 C55 放 在 文档 标 头 处 

妃 ” ， 将 查询 字符 串 从 静态 资源 中 删除 
BA 优化 样式 表 和 脚本 的 排列 顺序 
九 使 用 浏览 器 组 存 

C4 目标 网 页 重 定向 可 

砚 | 内 尝 小 型 C55 


图 17-8 对 某 页 面 检查 的 结果 


Page Speed 提供 的 建议 是 多 方面 的 ,前 端 性 能 的 方法 基本 都 已 经 包含 在 Page Speed 
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的 检查 内 容 中 , 除 此 之 外 ,Page Speed 还 包含 了 许多 其 他 方面 的 最 佳 实践 和 建议 。 完 整 
的 Page Speed 的 规则 列表 请 参见 https://developers. google. com/ speed/docs/insights/ 


rules。 
17.4.5 DynaTrace AJAX Edition 工具 


DynaTrace AJAX Edition 工具 是 Windows 平台 上 的 免费 工具 ,该 工具 提供 了 非常 
强大 的 前 端 性 能 测试 支持 。 从 该 工具 的 名 称 就 可 以 看 出 ,其 主要 是 针对 大 量 使 用 Ajax 技 
术 的 应 用 开发 的 。 可 以 从 http://ajax. dynatrace. com/ajax/en/ 获 得 DynaTrace AJAX 
Edition 工具 ,此 处 使 用 的 版 本 为 4.2。 安 装 该 工具 后 ,第 一 次 打开 时 系统 会 提示 用 户 输 
入 Community Account, 如 图 17-9 所 示 ,如 果 用 户 有 Community Account, 就 可 以 充分 利 
用 DynaTrace 的 平台 ,与 其 他 人 交流 前 端 性 能 测试 经 验 , 以 及 从 DynaTrace 网 站 获得 一 
些 可 供 比 较 的 基准 结果 。 


个- 量 -| 少 工 上 总 | 关 @@ 


(cockpit [ sentpsge] 


Start Page | - 
»@ Browsers 
个 sessions 8 


your session. Double- 
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17-9 新 建 DynaTrace AJAX Edition 


打开 该 工具 后 , 单 击 工具 栏 最 左 侧 按钮 旁 的 下 拉 按 钮 ,从 下 拉 菜 单 中 选择 New Run 
Configuration 命令 ,输入 项 目 名 称 和 要 访问 的 网 站 URL ,就 可 以 开始 执行 任务 了 。 

DynaTrace AJAX Edition 工具 会 打开 一 个 正 窗口 并 访问 指定 的 URL。 打 开 正 窗 
口 后 ,在 DynaTraceAJAX Edition 的 主 窗口 中 会 显示 对 该 网 页 的 总 评分 以 及 各 个 分 项 目 
的 评分 信息 ,如 图 17-10 所 示 。 

DynaTrace AJAX Edition 能 够 给 出 浏览 器 在 访问 给 定 URL 时 的 许多 信息 ,如 页 面 
中 各 元 素 的 下 载 和 执行 时 间 点 、 页 面 对 浏 览 器 缓存 的 使 用 情况 等 ,并 能 够 根据 一 些 预定 义 
的 规则 给 出 建议 。 

除 此 之 外 ,DynaTrace AJAX Edition 工具 最 突出 的 功能 是 对 页 面 上 的 JavaScript 调 
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图 17-10 DynaTrace AJAX Edition 对 某 网 站 的 检查 结果 


优 。 如 图 17-11 所 示 的 是 DynaTrace AJAX Edition 对 某 网 站 的 分 析 结果 ,图 中 展示 了 页 
面 上 所 有 JavaScript 脚本 执行 的 时 间 , 单 击 脚本 列表 ,可 以 看 到 脚本 函数 的 执行 顺序 以 及 


每 个 脚本 的 具体 内 容 。 
Start page [Wr Hot Spots | 国 Nework |oG Purepaths 53 [Timeine | 国 Network 
Go eon 司 四 - 
Q| 7 ~ showing:al 
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哆 1037 11766 5593 4680 1004 。 Javascript <script> 
10.51 272.97 26.60 3120 1637 JavaScript <script> 目 
9 1054 2673 24.85 000 10 JavaScript <script> 
1057 003 003 000 4 JavaScript readystatechange event on <s 
» 1057 0.02 002 000 4 JavaScript 。 readystatechange event on <sec » 
| 
Activity [not aggregated] Start [ms] Duration [m.. APl 
日 哆 JavasSeript Execution ooo0 002 Java 
日 @ nonreadystatechangetnull ") 000 0.01 <htn| 
readyState 001 000 DON| 
也 readyState O01 0.00 DON| 
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DynaTrace AJAX Edition 对 某 网 站 的 检查 结果 


DynaTrace AJAX Edition 工具 的 功能 非常 多 ,这 里 只 是 简单 介绍 了 该 工具 的 基本 使 


用 方式 ,更 详细 的 使 用 方式 请 读者 自行 探索 。 
在 网 站 页 面 性 能 优化 的 层面 ,为 读者 列举 雅虎 团队 的 经 验 。 


17.5 雅虎 团队 经 验 : 网 站 页 面 性 能 优化 的 34 
17.5.1 尽量 减少 HTTP 请 求 次 数 


条 黄金 守则 


终端 用 户 响应 的 时 间 中 ,有 80% 用 于 下 载 各 项 内 容 。 这 部 分 时 间 包 括 下 载 页 面 中 的 


205| 一 一 一 一 一 一 一 一 


《软件 测试 理论 与 技术 》 


图 像样 式 表 、 和 脚本 、Flash 等 。 通 过 减少 页 面 中 的 元 素 可 以 减少 HTTP 请 求 的 次 数 ,这 是 
提高 网 页 速度 的 关键 步骤 。 

减少 页 面 组 件 的 方法 其 实 就 是 简化 页 面 设计 。 那 么 有 没有 一 种 方法 既 能 保持 页 面 内 
容 的 丰富 性 又 能 达到 加 快 响应 时 间 的 目的 呢 ? 这 里 有 几 条 减少 HTTP 请 求 次 数 同时 又 
保持 页 面 内 容 丰 富 的 技术 。 

合并 文件 是 通过 把 所 有 的 脚本 放 到 一 个 文件 中 来 减少 HTTP 请 求 的 方法 ,如 可 以 简 
单 地 把 所 有 的 CSS 文件 都 放 入 一 个 样式 表 中 。 当 脚本 或 者 样式 表 在 不 同 页 面 中 使 用 时 
需要 做 不 同 的 修改 ,这 可 能 会 相对 麻烦 点 ,但 即便 如 此 也 要 把 这 个 方法 作为 改善 页 面 性 能 
的 重要 一 步 。 

CSS Sprites 是 减少 图 像 请 求 的 有 效 方法 。 把 所 有 的 背景 图 像 都 放 到 一 个 图 片 文件 
中 ,然后 通过 CSS 的 background-image 和 background-position 属性 来 显示 图 片 的 不 同 
部 分 。 

图 片 地 图 是 把 多 张 图 片 整合 到 一 张 图 片 中 。 虽 然 文件 的 总 体 大 小 不 会 改变 ,但 是 可 
以 减少 HTTP 请 求 次 数 。 图 片 地 图 只 有 在 图 片 的 所 有 组 成 部 分 在 页 面 中 是 紧 挨 在 一 起 
的 时 候 才 能 使 用 ,如 导航 栏 。 确 定 图 片 的 坐标 和 可 能 会 比较 烦琐 且 容 易 出 错 , 同 时 使 用 图 
片 地 图 导航 也 不 具有 可 读 性 ,因此 不 推荐 这 种 方法 。 

内 联 图 像 是 使 用 data: URL scheme 的 方法 把 图 像 数据 加 载 页 面 中 。 这 可 能 会 增加 
页 面 的 大 小 。 把 内 联 图 像 放 到 样式 表 ( 可 缓存 ) 中 可 以 减少 HTTP 请 求 同 时 又 避免 增加 
页 面 文件 的 大 小 。 但 是 内 联 图 像 现 在 还 没有 得 到 主流 浏览 器 的 支持 。 

减少 页 面 的 HTTP 请 求 次 数 是 首先 要 做 的 一 步 。 这 是 改进 首次 访问 用 户 等 待 时 间 
最 重要 的 方法 。 如 同 Tenni Theurer 的 他 的 博客 Browser Cache Usage-Exposed 中 所 说 ， 
HTTP 请 求 在 无 缓存 情况 下 占 去 了 40% 一 60% 的 响应 时 间 。 让 那些 初次 访问 你 网 站 的 
人 获得 更 加 快速 的 体验 吧 ! 


17.5.2 减少 DNS 查找 次 数 


域名 系统 (DNS) 提 供 了 域名 和 IP 的 对 应 关系 ,就 像 电话 本 中 人 名 和 他 们 的 电话 号 码 
的 关系 一 样 。 当 用 户 在 浏览 器 地 址 栏 中 输入 www. dudo. org 时 ,DNS 解析 服务 器 就 会 返 
回 这 个 域名 对 应 的 IP 地 址 。DNS 的 解析 过 程 同样 也 是 需要 时 间 的 。 一 般 情况 下 返回 给 
定 域名 对 应 的 IP 地 址 会 花费 20 一 120ms 的 时 间 ,而 且 在 这 个 过 程 中 浏览 器 什么 都 不 会 
做 直到 DNS 查找 完毕 。 

缓存 DNS 查找 可 以 改善 页 面 性 能 。 这 种 缓存 需要 一 个 特定 的 缓存 服务 器 ,这 种 服务 
器 一 般 属于 用 户 的 ISP 提供 商 或 者 本 地 局 域 网 控制 ,但 是 它 同 样 会 在 用 户 使 用 的 计算 机 
上 产生 缓存 。DNS 信息 会 保留 在 操作 系统 的 DNS 缓存 中 (微软 Windows 系统 中 的 DNS 
Client Service) 。 大 多 数 浏览 器 有 独立 于 操作 系统 以 外 的 自己 的 缓存 。 由 于 浏览 器 有 自 
己 的 缓存 记录 ,因此 在 一 次 请 求 中 它 不 会 受到 操作 系统 的 影响 。 

Internet Explorer 默认 情况 下 对 DNS 查找 记录 的 缓存 时 间 为 30min, 它 在 注册 表 中 
的 键 值 为 DNSCacheTimeout。Firefox 对 DNS 的 查找 记录 缓存 时 间 为 1min, 它 在 配置 文 


206| 


第 17 章 区 人 全 和 EDEoik 提 


件 中 的 选项 为 network. dnsCacheExpiration(Fasterfox 把 这 个 选项 改 为 了 1h)。 

当 客 户 端 中 的 DNS 缓存 都 为 空 时 (浏览 器 和 操作 系统 都 为 空 ), DNS 查找 的 次 数 和 
页 面 中 主机 名 的 数量 相同 ,这 其 中 包括 页 面 中 URL、 图 片 、 脚 本 文件 ,样式 表 、Flash 对 象 
等 包含 的 主机 名 。 减 少 主 机 名 的 数量 可 以 减少 DNS 查找 次 数 。 

减少 主机 名 的 数量 还 可 以 减少 页 面 中 并 行 下 载 的 数量 。 减 少 DNS 查找 次 数 可 以 节 
省 响应 时 间 , 但 是 减少 并 行 下 载 却 会 增加 响应 时 间 。 笔 者 的 指导 原则 是 把 这 些 页 面 中 的 
内 容 分 割 成 至 少 两 部 分 但 不 超过 四 部 分 。 这 种 结果 就 是 在 减少 DNS 查找 次 数 和 保持 较 
高 程度 并 行 下 载 两 者 之 间 的 权衡 了 。 


17.5.3 避免 跳 转 


跳 转 是 使 用 301 和 302 代码 实现 的 。 下 面 是 一 个 响应 代码 为 301 的 HTTP 头 : 


HTTP/1.1 301 Moved Fermmanently 

Tocation:http://exarple.om/newuri 

Content- Type: text/html 

浏览 器 会 把 用 户 指向 Location 中 指定 的 URL。 头 文件 中 的 所 有 信息 在 一 次 跳 转 中 
都 是 必需 的 ,内 容 部 分 可 以 为 空 。 不 管 它 们 的 名 称 ,301 和 302 响应 都 不 会 被 缓存 除非 增 
加 一 个 额外 的 头 选 项 ,如 Expires 或 者 Cache-Control 来 指定 它 缓存 。 志 meat /二 元 素 的 
刷新 标签 和 JavaScript 也 可 以 实现 URL 的 跳 转 ,但 是 如 果 必 须要 跳 转 ,最 好 的 方法 就 是 
使 用 标准 的 3XXHTTP 状态 代码 ,这 主要 是 为 了 确保 “后 退 ” 按 钮 可 以 正确 地 使 用 。 

但 是 要 记 住 跳 转 会 降低 用 户 体验 。 在 用 户 和 HTML 文档 中 间 增 加 一 个 跳 转 ,会 拖 
延 页 面 中 所 有 元 素 的 显示 ,因为 在 HTML 文件 被 加 载 前 任何 文件 (图 像 、Flash 等 ) 都 不 
会 被 下 载 。 

有 一 种 经 常 被 网 页 开发 者 忽略 却 往 往 十 分 浪费 响应 时 间 的 跳 转 现象 。 这 种 现象 发 生 
在 当 URL 本 该 有 和 斜 杠 (/) 却 被 忽略 掉 时 。 例 如 , 当 要 访问 http://astrology. yahoo. com/ 
astrology 时 ,实际 上 返回 的 是 一 个 包含 301 代码 的 跳 转 , 它 指向 的 是 http://astrology. 
yahoo. com/astrology/( 注 意 末尾 的 斜 杠 )。 在 Apache 服务 器 中 可 以 使 用 Alias 或 者 
mod_rewrite 或 者 the DirectorySlash 来 避免 。 

连接 新 网 站 和 旧 网 站 是 跳 转 功能 经 常 被 用 到 的 另 一 种 情况 。 这 种 情况 下 往往 要 连接 
网 站 的 不 同 内 容 然 后 根据 用 户 的 不 同类 型 (如 浏览 器 类 型 .用 户 账号 所 属 类 型 ) 来 进行 跳 
转 。 使 用 跳 转 来 实现 两 个 网 站 的 切换 十 分 简单 ,需要 的 代码 量 也 不 多 。 尽 管 使 用 这 种 方 
法 对 于 开发 者 来 说 可 以 降低 复杂 程度 ,但 是 它 同 样 会 降低 用 户 体 验 。 一 个 可 替代 的 方法 
就 是 如 果 两 者 在 同一 台 服 务 器 上 时 使 用 Alias 和 mod_rewrite 实现 。 如 果 是 因为 域名 的 
不 同 而 采用 跳 转 的 ,那么 可 以 通过 使 用 Alias 或 者 mod_rewrite 建立 CNAME( 保 存 一 个 
域名 和 另外 一 个 域名 之 间 关 系 的 DNS 记录 ) 来 替代 。 


207 


《软件 测试 理论 与 技术 》 


17.5.4 可 缓存 的 Ajax 


Ajax 经 常 被 提 及 的 一 个 好 处 就 是 由 于 其 从 后 台 服 务 器 传输 信息 的 异步 性 而 为 用 户 
带 来 的 反馈 的 即时 性 。 但 是 ,使 用 Ajax 并 不 能 保证 用 户 不 会 在 等 待 异 步 的 JavaScript 和 
XML 响应 上 花费 时 间 。 在 很 多 应 用 中 ,用 户 是 否 需 要 等 待 响应 取决 于 Ajax 如 何 来 使 用 。 
例如 ,在 一 个 基于 Web 的 Email 客户 端 中 ,用 户 必须 等 待 Ajax 返回 符合 它们 条 件 的 邮件 
查询 结果 。 记 住 一 点 ,“ 异 步 ” 并 不 意味 着 “即时 ”, 这 很 重要 。 

为 了 提高 性 能 ,优化 Ajax 响应 是 很 重要 的 。 提 高 Ajax 性 能 的 措施 中 最 重要 的 方法 
就 是 使 响应 具有 可 缓存 性 ,具体 的 讨论 可 以 查看 Add an Expires or a Cache-Control 
Header, 其 他 的 几 条 规则 也 同样 适用 于 Ajax: 

(1) Gizp 压缩 文件 ; 

(2) 减少 DNS 查找 次 数 ; 

(3) 精简 JavaScript; 

(4) 避免 跳 转 ; 

(5) 配置 ETags。 

来 看 一 个 例子 : 一 个 Web 2.0 的 Email 客户 端 会 使 用 Ajax 来 自动 完成 对 用 户 地 址 
每 的 下 载 。 如 果 用 户 在 上 次 使 用 过 Email Web 应 用 程序 后 没有 对 地 址 簿 做 任何 修改 ,而 
且 Ajax 响应 通过 Expire 或 者 Cache-Control 头 来 实现 缓存 ,那么 就 可 以 直接 从 上 一 次 的 
缓存 中 读 取 地 址 短 了 。 必 须 告知 浏览 器 是 使 用 缓存 中 的 地 址 每 还 是 发 送 一 个 新 的 请 求 。 
这 可 以 通过 为 读 取 地 址 簿 的 Ajax URL 增加 一 个 含有 上 次 编辑 时 间 的 时 间 戳 来 实现 , 例 
如 ,&t=11900241612 等 。 如 果 地 址 夭 在 上 次 下 载 后 没有 被 编辑 过 ,时 间 戳 就 不 变 , 则 从 
浏览 器 的 缓存 中 加 载 从 而 减少 一 次 HTTP 请 求 过 程 。 如 果 用 户 修改 过 地 址 每 ,时 间 戳 就 
会 用 来 确定 新 的 URL 和 缓存 响应 并 不 匹配 ,浏览 器 就 会 重新 请 求 更 新 地 址 每 。 

即使 Ajax 响应 是 动态 生成 的 ,哪怕 它 只 适用 于 一 个 用 户 ,那么 它 也 应 该 被 缓存 起 来 。 
这 样 做 可 以 使 Web2. 0 应 用 程序 更 加 快捷 。 


17.5.5 推迟 加 载 内 容 


可 以 仔细 看 一 下 自己 的 网 页 , 问 问 自己 “哪些 内 容 是 页 面 呈 现时 必需 首先 加 载 的 ? 哪 
些 内 容 和 结构 可 以 稍 后 再 加 载 ?” 

把 整个 过 程 按照 onload 事件 分 隔 成 两 部 分 ,JavaScript 是 一 个 理想 的 选择 。 例 如 ,有 
用 于 实现 拖 放 和 动画 的 JavaScript, 那 么 它 就 应 等 待 稍 后 加 载 ,因为 页 面 上 的 拖 放 元 素 是 
在 初始 化 呈现 之 后 才 发 生 的 。 其 他 的 例如 隐藏 部 分 的 内 容 ( 用 户 操作 之 后 才 显现 的 内 容 ) 
和 处 于 折 伙 部 分 的 图 像 也 可 以 推迟 加 载 。 

工具 可 以 节省 工作 量 : YUI Image Loader 可 以 帮 用 户 推 迟 加 载 折 秋 部 分 的 图 片 ， 
YUI Get utility 是 包含 JS 和 CSS 的 便捷 方法 。 例 如 可 以 打开 Firebug 的 Net 选项 卡 看 
一 下 Yahoo 的 首页 。 
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当 性 能 目标 和 其 他 网 站 开发 实践 一 致 时 就 会 相得益彰 。 这 种 情况 下 ,通过 程序 提高 
网 站 性 能 的 方法 告诉 人 们 ,在 支持 JavaScript 的 情况 下 ,可 以 先 去 除 用 户 体 验 ,不 过 这 要 
保证 网 站 在 没有 JavaScript 时 也 可 以 正常 运行 。 在 确定 页 面 运行 正常 后 ,再 加 载 脚本 来 
实现 如 拖 放 和 动画 等 更 加 花哨 的 效果 。 


17.5.6 预 加 载 


预 加 载 和 后 加 载 看 起 来 似乎 恰恰 相反 ,但 实际 上 预 加 载 是 为 了 实现 另外 一 种 目标 。 
预 加 载 是 在 浏览 器 空闲 时 请 求 将 来 可 能 会 用 到 的 页 面 内 容 ( 如 图 像样 式 表 和 脚本 )。 使 
用 这 种 方法 , 当 用 户 要 访问 下 一 个 页 面 时 ,页 面 中 的 内 容 大 部 分 已 经 加 载 到 缓存 中 了 , 因 
此 可 以 大 大 改善 访问 速度 。 

下 面 提 供 了 儿 种 预 加 载 方法 。 

(1) 无 条 件 加 载 : 触发 onload 事件 时 ,直接 加 载 额 外 的 页 面 内 容 。 以 Google. com 为 
例 , 可 以 看 一 下 它 的 spirit image 图 像 是 怎样 在 onload 中 加 载 的 。 这 个 spirit image 图 像 
在 google. com 主页 中 是 不 需要 的 ,但 是 却 可 以 在 搜索 结果 页 面 中 用 到 它 。 

(2) 有 条 件 加 载 : 根据 用 户 的 操作 来 有 根据 地 判断 用 户 下 面 可 能 去 往 的 页 面 以 及 相 
应 的 预 加 载 页 面 内 容 。 在 search. yahoo. com 中 可 以 看 到 如 何在 输入 内 容 时 加 载 额外 的 
页 面 内 容 。 

(3) 有 预期 的 加 载 : 载 人 重新 设计 过 的 页 面 时 使 用 预 加 载 。 这 种 情况 经 常 出 现在 页 
面 经 过 重新 设计 后 ,用 户 抱怨 * 新 的 页 面 看 起 来 很 酷 , 但 是 却 比 以 前 慢 ”, 问 题 可 能 出 在 用 
户 对 于 旧 站 点 建立 了 完整 的 缓存 ,而 对 于 新 站 点 却 没 有 任何 缓存 内 容 。 因 此 可 以 在 访问 
新 站 之 前 就 加 载 一 部 内 容 来 避免 这 种 结果 的 出 现 。 在 旧 站 中 利用 浏览 器 的 空余 时 间 加 载 
新 站 中 用 到 的 图 像 和 脚本 来 提高 访问 速度 。 


17.5.7 减少 DOM 元 素数 量 


一 个 复杂 的 页 面 意 味 着 需要 下 载 更 多 数据 ,同时 也 意味 着 JavaScript 遍历 DOM 的 
效率 越 慢 。 例 如 当 增 加 一 个 事件 句柄 时 ,在 500 和 5000 个 DOM 元 素 中 的 循环 效果 肯定 
是 不 一 样 的 。 

大 量 DOM 元 素 的 存在 意味 着 页 面 中 有 可 以 不 用 移 除 内 容 只 需要 蔡 换 元 素 标 签 就 可 
以 精简 的 部 分 。 你 在 页 面 布局 中 使 用 表格 了 吗 ? 你 有 没有 仅仅 为 了 布局 而 引入 更 多 的 
二 div 二 元素 呢 ?” 也 许 会 存在 一 个 语意 更 适合 或 更 贴切 的 标签 可 以 供 你 使 用 。 

YUI CSS utilities 可 以 给 布局 带 来 巨大 的 帮助 : grids. css 可 以 帮 用 户 实现 整体 布 
局 ,font. css 和 reset. css 可 以 帮助 用 户 移 除 浏览 器 默认 格式 。 它 提供 了 一 个 重新 审视 页 
面 中 的 标签 的 机 会 ,例如 只 有 在 语意 上 有 意义 时 才 使 用 所 div 之 ,而 不 是 因为 它 具 有 换行 
效果 才 使 用 它 。 

DOM 元 素数 量 很 容易 计算 出 来 ,只 需要 在 Firebug 的 控制 台 内 输入 : 


document.getElementsBYTagName (' * ') .length 
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那么 多 少 个 DOM 元 素 算是 多 呢 ? 这 可 以 对 照 有 很 好 标记 使 用 的 类 似 页 面 。 例 如 
Yahool! 主页 是 一 个 内 容 非 常 多 的 页 面 .但 是 它 只 使 用 了 700 个 元 素 (HTML 标签 ) 。 


17.5.8 根据 域名 划分 页 面 内 容 


把 页 面 内 容 划分 成 若干 部 分 ,从 而 最 大 限度 地 实现 平行 下 载 。 由 于 DNS 查找 带 来 的 
影响 ,首先 要 确保 使 用 的 域名 数量 为 2 一 4 个。 例如 ,可 以 把 用 到 的 HTML 内 容 和 动态 
内 容 放 在 www. example. org 上 ,而 把 页 面 各 种 组 件 ( 图 片 、 脚 本 、CSS) 分 别 存放 在 
staticsl. example. org 和 statics. example. org 上 。 

可 以 在 Tenni Theurer 和 Patty Chi 合 写 的 文章 Maximizing Parallel Downloads in 
the Carpool Lane 找到 更 多 相关 信息 。 


17.5.9 使 iframe 的 数量 最 小 


iframe 元 素 可 以 在 父 文档 中 插入 一 个 新 的 HTML 文档 。 了 解 iframe 的 工作 原理 后 
才能 更 加 有 效 地 使 用 它 , 这 一 点 很 重要 。 


1. iframe 优点 


(1) 解决 加 载 缓慢 的 第 三 方 内 容 如 图 标 和 广告 等 的 加 载 问题 ; 
(2) Security sandbox; 


(3) 并 行 加 载 脚本 。 
2. iframe 的 缺点 


(1) 即时 内 容 为 空 ,加 载 也 需要 时 间 ， 
(2) 会 阻止 页 面 加 载 ; 
(3) 没有 语意 。 


17.5.10 不 要 出 现 404 错误 


HTTP 请 求 时 间 消 耗 是 很 大 的 ,因此 使 用 HTTP 请 求 来 获得 一 个 没有 用 处 的 响应 
(例如 404 没有 找到 页 面 ) 是 完全 没有 必要 的 , 它 只 会 降低 用 户 体验 而 不 会 有 一 点 好 处 。 

有 些 站 点 把 404 错误 响应 页 面 改 为 “你 是 不 是 要 找 ***”, 这 虽然 改进 了 用 户 体验 但 是 
同样 也 会 浪费 服务 器 资源 (如 数据 库 等 )。 最 糟糕 的 情况 是 指向 外 部 JavaScript 的 链接 出 
现 问题 并 返回 404 代码 。 首 先 , 这 种 加 载 会 破坏 并 行 加载 ; 其 次 浏览 器 会 把 试图 在 返回 的 
404 响应 内 容 中 找到 可 能 有 用 的 部 分 当 作 JavaScript 代码 来 执行 。 
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17.5.11 使 用 内 容 分 发 网 络 


用 户 与 网 站 服务 器 的 接近 程度 会 影响 响应 时 间 的 长 短 。 把 网 站 内 容 分 散 到 多 个 、 处 
于 不 同 地 域 位 置 的 服务 器 上 可 以 加 快 下 载 速度 ,但 是 首先 应 该 做 些 什么 呢 ? 

按 地 域 布置 网 站 内 容 的 第 一 步 并 不 是 要 尝试 重新 架构 网 站 ,让 它们 在 分 发 服务 器 上 
正常 运行 。 根 据 应 用 的 需求 来 改变 网 站 结构 ,这 可 能 会 包括 一 些 比较 复杂 的 任务 ,如 在 服 
务 器 间 同 步 Session 状态 和 合并 数据 库 更 新 等 。 要 想 缩短 用 户 和 内 容 服 务 器 的 距离 ,这 
些 架 构 步 又 可 能 是 不 可 避免 的 。 

要 记 住 ,在 终端 用 户 的 响应 时 间 中 有 80% 一 90% 的 响应 时 间 用 于 下 载 图 像样 式 表 、 
脚本 、Flash 等 页 面 内 容 , 这 就 是 网 站 性 能 黄金 守则 。 和 重新 设计 应 用 程序 架构 这 样 比较 
困难 的 任务 相 比 ,首先 来 分 布 静 态 内 容 会 更 好 一 点 。 这 不 仅 会 缩短 响应 时 间 , 而 且 对 于 内 
容 分 发 网 络 来 说 它 更 容易 实现 。 

内 容 分 发 网 络 (Content Delivery Network,CDN) 是 由 一 系列 分 散 到 各 个 不 同 地 理 位 
置 上 的 Web 服务 器 组 成 的 , 它 提 高 了 网 站 内 容 的 传输 速度 。 用 于 向 用 户 传输 内 容 的 服务 
器 主要 是 根据 和 用 户 在 网 络 上 的 靠近 程度 来 指定 的 。 例 如 ,拥有 最 少 网 络 跳 数 (Network 
Hops) 和 响应 速度 最 快 的 服务 器 会 被 选 定 。 

一 些 大 型 的 网 络 公司 拥 有 自己 的 CDN, 但 是 使 用 像 Akamai Technologies, Mirror 
Image Internet, 或 者 Limelight Networks 这 样 的 CDN 服务 成 本 却 非常 高 。 对 于 刚刚 起 
步 的 企业 和 个 人 网 站 来 说 ,可 能 没有 使 用 CDN 的 成 本 预算 ,但 是 随 着 目标 用 户 群 的 不 断 
扩大 和 更 加 全 球 化 ,CDN 就 是 实现 快速 响应 所 必需 的 了 。 以 Yahoo 来 说 ,它们 转移 到 
CDN 上 的 网 站 程序 静态 内 容 节省 了 终端 用 户 20% 以 上 的 响应 时 间 。 使 用 CDN 是 一 个 
只 需要 相对 简单 地 修改 代码 实现 显著 改善 网 站 访问 速度 的 方法 。 


17.5.12 为 文件 头 指 定 Expires 或 Cache-Control 


这 条 守则 包括 两 方面 的 内 容 。 

对 于 静态 内 容 : 设置 文件 头 过 期 时 间 Expires 的 值 为 Never expire( 永 不 过 期 ) 。 

对 于 动态 内 容 : 使 用 恰当 的 Cache-Control 文件 头 来 帮助 浏览 器 进行 有 条 件 的 请 求 。 

网 页 内 容 设计 现在 越 来 越 丰 富 , 这 就 意味 着 页 面 中 要 包含 更 多 的 脚本 、 样 式 表 、 图 片 
和 Flash。 第 一 次 访问 页 面 的 用 户 就 意味 着 进行 多 次 的 HTTP 请 求 , 但 是 通过 使 用 
Expires 文件 头 就 可 以 使 这 样 的 内 容 具 有 缓存 性 。 它 避免 了 接 下 来 的 页 面 访问 中 不 必要 
的 HTTP 请 求 。Expires 文件 头 经 常用 于 图 像 文件 ,但 是 应 该 在 所 有 的 内 容 中 都 使 用 它 ， 
包括 脚本 、 样 式 表 和 Flash 等 。 

浏览 器 (和 代理 ) 使 用 缓存 来 减少 HTTP 请 求 的 大 小 和 次 数 以 加 快 页 面 访问 速度 。 
Web 服务 器 在 HTTP 响应 中 使 用 Expires 文件 头 来 告诉 客户 端 内 容 需 要 缓存 多 长 时 间 。 
下 面 这 个 例子 是 一 个 较 长 时 间 的 Expires 文件 头 , 它 告诉 浏览 器 这 个 响应 直到 2010 年 
4 月 15 日 才 过 期 。 
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Expires: Thu, 15 Apr 2010 20:00:00 GMT 


如 果 使 用 的 是 Apache 服务 器 ,可 以 使 用 ExpiresDefault 来 设 定 相 对 当前 日 期 的 过 期 
时 间 。 下 面 这 个 例子 是 使 用 ExpiresDefault 来 设 定 请 求 时 间 后 10 年 过 期 的 文件 头 : 

EsgpiresDefault "access plus 10 years" 

要 切记 ,如 果 使 用 了 Expires 文件 头 , 当 页 面 内 容 改 变 时 就 必须 改变 内 容 的 文件 名 。 
按 Yahoo! 来 说 人 们 经 常 使 用 这 样 的 步骤 : 在 内 容 的 文件 名 中 加 上 版 本 号 ,如 yahoo_2. 
0.6, js。 

使 用 Expires 文件 头 只 会 在 用 户 已 经 访问 过 该 网 站 后 才 会 起 作用 。 当 用 户 首次 访问 
网 站 时 ,这 对 减少 HTTP 请 求 次 数 来 说 是 无 效 的 ,因为 浏览 器 的 缓存 是 空 的 。 因 此 这 种 
方法 对 于 网 站 性 能 的 改进 情况 要 依据 它们 * 预 缓存 存在 时 对 页 面 的 单 击 频率 (“ 预 缓存 ” 
中 已 经 包含 了 页 面 中 的 所 有 内 容 )。Yahoo! 建立 了 一 套 测量 方法 ,人 们 发 现 所 有 的 页 面 
浏览 量 中 有 75% 一 85 儿 都 有 * 预 缓存 ”。 通 过 使 用 Expires 文件 头 ,增加 了 缓存 在 浏览 器 
中 内 容 的 数量 ,并 且 可 以 在 用 户 接 下 来 的 请 求 中 再 次 使 用 这 些 内 容 ,这 甚至 都 不 需要 通过 
用 户 发 送 一 个 字 节 的 请 求 。 


17.5.13 Gzip 压缩 文件 内 容 


网 络 传输 中 的 HTTP 请 求 和 应 答 时 间 可 以 通过 前 端 机 制 得 到 显著 改善 。 的 确 ,终端 
用 户 的 带宽 .互联 网 提供 者 .与 对 等 交换 点 的 靠近 程度 等 都 不 是 网 站 开发 者 所 能 决定 的 ， 
但 是 还 有 其 他 因素 影响 着 响应 时 间 ,通过 减 小 HTTP 响应 的 大 小 可 以 节省 HTTP 响应 
时 间 。 

从 HTTP/1.1 开始,Web 客户 端 都 默认 支持 HTTP 请 求 中 有 Accept-Encoding 文 
件 头 的 压缩 格式 : 


Aocept— Enooding: gzip, deflate 

如 果 Web 服务 器 在 请 求 的 文件 头 中 检测 到 上 面 的 代码 ,就 会 以 客户 端 列 出 的 方式 压 
缩 响应 内 容 。Web 服务 器 把 压缩 方式 通过 响应 文件 头 中 的 Content-Encoding 来 返回 给 
浏览 器 。 

Content— Enooding: gzip 

Gzip 是 目前 最 流行 也 是 最 有 效 的 压缩 方式 。 这 是 由 GNU 项 目 开 发 并 通过 RFC 
1952 来 标准 化 的 。 另 外 仅 有 的 一 个 压缩 格式 是 deflate, 但 是 它 的 使 用 范围 有 限 , 效 果 也 
稍稍 逊色 。 

Gzip 大 概 可 以 减少 70% 的 响应 规模 。 目 前 大 约 有 90% 通 过 浏览 器 传输 的 互联 网 交 
换 支持 Gzip 格式 。 如 果 使 用 的 是 Apache,Gzip 模块 配置 和 版 本 有 关 : Apache 1. 3 使 用 
mod_zip, 而 Apache 2. x 使 用 moflate。 

浏览 器 和 代理 都 会 存在 这 样 的 问题 : 浏览 器 期 望 收 到 的 和 实际 接收 到 的 内 容 会 存在 
不 匹配 的 现象 。 幸 好 ,这 种 特殊 情况 随 着 旧式 浏览 器 使 用 量 的 减少 在 减少 。Apache 模块 
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会 通过 自动 添加 适当 的 Vary 响应 文件 头 来 避免 这 种 状况 的 出 现 。 

服务 器 根据 文件 类 型 来 选择 需要 进行 gzip 压缩 的 文件 ,但 是 这 过 于 限制 了 可 压缩 的 
文件 。 大 多 数 Web 服务 器 会 压缩 HTML 文档 。 对 脚本 和 样式 表 进行 压缩 同样 也 是 值得 
做 的 事情 ,但 是 很 多 Web 服务 器 都 没有 这 个 功能 。 实 际 上 ,压缩 任何 一 个 文本 类 型 的 响 
应 ,包括 XML 和 JSON ,都 是 值得 的 。 图 像 和 PDF 文件 由 于 已 经 压缩 过 了 所 以 不 能 再 进 
行 Gzip 压缩 。 如 果 试 图 Gizp 压缩 这 些 文件 的 话 ,不 但 会 浪费 CPU 资源 还 会 增加 文件 的 
大 小 。 

Gzip 压缩 所 有 可 能 的 文件 类 型 是 减少 文件 体积 增加 用 户 体验 的 简单 方法 。 


17.5.14 配置 ETag 


Entity Tag(ETag) (实体 标签 ) 是 Web 服务 器 和 浏览 器 用 于 判断 浏览 器 缓存 中 的 内 
容 和 服务 器 中 的 原始 内 容 是 否 匹 配 的 一 种 机 制 (* 实 体 ” 就 是 所 说 的 “内 容 ”, 包 括 图 片 、 脚 
本 、 样 式 表 等 )。 增 加 ETag 为 实体 的 验证 提供 了 一 个 比 使 用 last-modified date( 上 次 编 
辑 时 间 ) 更 加 灵活 的 机 制 。ETag 是 一 个 识别 内 容 版 本 号 的 唯一 字符 串 。 唯 一 的 格式 限 
制 就 是 它 必须 包含 在 双 引 号 内 。 原 始 服务 器 通过 含有 ETag 文件 头 的 响应 指定 页 面 内 容 
的 ETag。 


HTTE/1.1 200 Ok 

Iast- Modified: Tue, 12 Dec 2006 03:03:59 GMT 
ETag: "10c24bc- 4ab- 457elclfn 

Content- Length: 12195 


稍 后 ,如 果 浏 览 器 要 验证 一 个 文件 , 它 会 使 用 I-None-Match 文件 头 来 把 ETag 传 回 
给 原始 服务 器 。 在 这 个 例子 中 ,如 果 ETag 匹配 ,就 会 返回 一 个 304 状态 码 , 这 就 节省 了 
12195 字 节 的 响应 。 


GET /i/yahoo.gif HTTP/1.1 

Host: us.Yimg.com 

If- Modified- Since: Tue, 12 Dec 2006 03:03:59 GMT 
If- None- Match: "10c24bc- 4ab- 457elclf™" 

HITP/1.1 304 Not Modified 


ETag 的 问题 在 于 , 它 是 根据 可 以 辨别 网 站 所 在 的 服务 器 的 具有 唯一 性 的 属性 来 生 
成 的 。 当 浏览 器 从 一 台 服 务 器 上 获得 页 面 内 容 后 到 另外 一 台 服 务 器 上 进行 验证 时 ETag 
就 会 不 匹配 ,这 种 情况 对 于 使 用 服务 器 组 和 处 理 请 求 的 网 站 来 说 是 非常 常见 的 。 默 认 情 
况 下 ,Apache 和 IIS 都 会 把 数据 嵌入 ETag 中 ,这 会 显著 减少 多 服务 器 间 的 文件 验证 
冲突 。 

Apache 1.3 和 2. x 中 的 ETag 格式 为 inode-size-timestamp。 即 使 某 个 文件 在 不 同 
的 服务 器 上 会 处 于 相同 的 目录 下 ,文件 大 小 .权限 .时 间 截 等 都 完全 相同 ,但 是 在 不 同 服务 
器 上 它们 的 内 码 也 是 不 同 的 。 
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IIS 5.0 和 IIS 6.0 处 理 ETag 的 机 制 相似 。IIS 中 的 ETag 格式 为 Filetimestamp: 
ChangeNumber。 用 ChangeNumber 来 跟踪 IIS 配置 的 改变 。 网 站 所 用 的 不 同 IIS 服务 
器 间 的 ChangeNumber 也 不 相同 。 不同 的 服务 器 上 的 Apache 和 IIS 即使 对 于 完全 相同 
的 内 容 产生 的 ETag 在 也 不 相同 ,用户 并 不 会 接收 到 一 个 小 而 快 的 304 响应 ;相反 它们 会 
接收 一 个 正常 的 200 响应 并 下 载 全 部 内 容 。 如 果 网 站 只 放 在 一 台 服 务 器 上 ,就 不 会 存在 
这 个 问题 。 但 是 如 果 网 站 是 架设 在 多 个 服务 器 上 ,并 且 使 用 Apache 和 IIS 产生 默认 的 
ETag 配置 的 ,用 户 获 得 页 面 就 会 相对 慢 一 点 ,服务 器 会 传输 更 多 的 内 容 , 占 用 更 多 的 带 
宽 , 代 理 也 不 会 有 效 地 缓存 网 站 内 容 。 即 使 内 容 拥有 Expires 文件 头 ,无 论 用 户 什 么 时 候 
单 击 “ 刷 新 "或 者 “ 重 载 ”按钮 都 会 发 送 相 应 的 GET 请 求 。 

如 果 没 有 使 用 ETag 提供 的 灵活 的 验证 模式 ,那么 干脆 把 所 有 的 ETag 都 去 掉 会 更 
好 。Last-Modified 文件 头 验证 是 基于 内 容 的 时 间 蕉 的 。 去 掉 ETag 文件 头 会 减少 响应 
和 下 次 请 求 中 文件 的 大 小 。 微 软 的 这 篇 支持 文稿 讲述 了 如 何 去 掉 ETag。 在 Apache 中 ， 
只 需要 在 配置 文件 中 简单 添加 下 面 一 行 代 码 就 可 以 了 : 


FileETag none 


17.5.15 尽早 刷新 输出 缓冲 


当 用 户 请 求 一 个 页 面 时 ,无 论 如 何 都 会 花费 200 一 500ms 用 于 后 台 组 织 HTML 文 
件 。 在 这 期 间 ,浏览 器 会 一 直 空闲 等 待 数据 返回 。 在 PHP 中 ,可 以 使 用 flush() 方 法 , 它 
允许 用 户 把 已 经 编译 好 的 部 分 HTML 响应 文件 先 发 送 给 浏览 器 ,这 时 浏览 器 就 可 以 下 
载 文件 中 的 内 容 (脚本 等 ) 而 后 台 同 时 处 理 剩 余 的 HTML 页 面 。 这 样 做 的 效果 会 在 后 台 
繁忙 或 者 前 台 较 空闲 时 更 加 明显 。 

输出 缓冲 应 用 最 好 的 一 个 地 方 就 是 紧 跟 在 二 head /二 之 后 ,因为 HTML 的 头 部 分 容 
易 生 成 而 且 头 部 往往 包含 CSS 和 JavaScript 文件 .这样 浏览 器 就 可 以 在 后 台 编 译 剩 余 
HTML 的 同时 并 行 下 载 它们 ,例如 : 

Pt ed ~ 

< /heac> 

< ?php flush(); ?> 

<body> 


.< 1- —ontent 一 一 > 


为 了 证 明 使 用 这 项 技术 的 好 处 ,Yahoo! 搜索 率先 研究 并 完成 了 用 户 测试 。 
17.5.16 使 用 GET 来 完成 Ajax 请 求 
Yahoo! Mail 团队 发 现 , 当 使 用 XMLHttpRequest 时 ,浏览 器 中 的 POST 方法 是 一 


个 “两 步 走 ”的 过 程 : 首先 发 送 文件 头 , 然 后 才 发 送 数据 。 因 此 使 用 GET 最 为 恰当 ,因为 
它 只 需 发 送 一 个 TCP 包 ( 除 非 有 很 多 cookie)。IE 中 URL 的 最 大 长 度 为 KK, 因此 如 果 


214 


第 17 章 四 3 


要 发 送 一 个 超过 2K 的 数据 时 就 不 能 使 用 GET 了 。 

一 个 有 趣 的 不 同 就 是 POST 并 不 像 GET 那样 实际 发 送 数据 。 根据 HTTP 规范 ， 
GET 意味 着 “获取 ?数据 ,因此 当 仅仅 获取 数据 时 使 用 GET 更 加 有 意义 (从 语意 上 讲 也 是 
如 此 ) ,相反 ,发送 并 在 服务 端 保存 数据 时 使 用 POST。 


17.5.17 把 样式 表 置 于 顶部 


在 研究 Yahoo! 的 性 能 表现 时 ,笔者 发 现 把 样式 表 放 到 文档 的 二 head /二 内 部 似乎 
会 加 快 页 面 的 下 载 速度 。 这 是 因为 把 样式 表 放 到 二 head /二 内 会 使 页 面 有 步骤 地 加 载 
显示 。 

注重 性 能 的 前 端 服 务 器 往往 希望 页 面 有 秩序 地 加 载 。 同 时 ,也 希望 浏览 器 把 已 经 接 
收 到 的 内 容 尽 可 能 显示 出 来 。 这 对 于 拥有 较 多 内 容 的 页 面 和 网 速 较 慢 的 用 户 来 说 特别 重 
要 。 向 用 户 返回 可 视 化 的 反馈 ,如 进程 指针 ,已 经 有 了 较 好 的 研究 并 形成 了 正式 文档 。 在 
研究 中 ,HTML 页 面 就 是 进程 指针 。 当 浏览 器 有 序 地 加 载 文件 头 、 导 航 栏 、 顶 部 的 logo 
等 时 ,对 于 等 待 页 面 加 载 的 用 户 来 说 都 可 以 作为 可 视 化 的 反馈 ,这 从 整体 上 改善 了 用 户 体 
验 。 把 样式 表 放 在 文档 底部 的 问题 是 在 包括 Internet Explorer 在 内 的 很 多 浏览 器 中 这 会 
中 止 内 容 的 有 序 呈 现 。 浏 览 器 中 止 呈 现 是 为 了 避免 样式 改变 引起 的 页 面 元 素 重 绘 。 用 户 
不 得 不 面 对 一 个 空白 页 面 。 

HTML 规范 清楚 地 指出 样式 表 要 放 在 包含 在 页 面 的 二 head /二 区 域内 。 和 =<a /二 
不 同 , 一 link /二 只 能 出 现在 文档 的 一 head /二 区 域内 ,尽管 可 以 多 次 使 用 它 。 无 论 是 引 
起 白 屏 还 是 出 现 没 有 样式 化 的 内 容 都 不 值得 去 尝试 。 最 好 的 方案 就 是 按照 HTML 规范 
在 文档 二 head /二 内 加 载 样式 表 。 


17.5.18 避免 使 用 CSS 表达 式 


CSS 表达 式 (Expression) 是 动态 设置 CSS 属性 的 强大 (但 危险 ) 方 法 。Internet 
Explorer 从 第 5 个 版 本 开始 支持 CSS 表达 式 。 下 面 的 例子 中 ,使 用 CSS 表达 式 可 以 实现 
隔 一 个 小 时 切换 一 次 背景 颜色 : 

background- color: expression( (new Date ()) .getHours ()%2 ?SBSDAFE" : 

啡 FO8RO00" ) 7 

如 上 所 示 ,Expression 中 使 用 了 JavaScript 表达 式 。CSS 属性 根据 JavaScript 表达 
式 的 计算 结果 来 设置 。Expression 方法 在 其 他 浏览 器 中 不 起 作用 ,因此 在 跨 浏览 器 的 设 
计 中 单独 针对 Internet Explorer 设置 时 会 比较 有 用 。 

表达 式 的 问题 就 在 于 它 的 计算 频率 要 比 人 们 想象 得 多 。 不 仅仅 是 在 页 面 显 示 和 缩放 
时 ,就 是 在 页 面 滚动 乃至 移动 鼠标 时 都 要 重新 计算 一 次 。 给 CSS 表达 式 增加 一 个 计数 器 
可 以 跟踪 表达 式 的 计算 频率 。 在 页 面 中 随便 移动 鼠标 都 可 以 轻松 达到 10 000 次 以 上 的 
计算 量 。 
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一 个 减少 CSS 表达 式 计算 次 数 的 方法 就 是 使 用 一 次 性 的 表达 式 , 它 在 第 一 次 运行 时 
将 结果 赋 给 指定 的 样式 属性 ,并 用 这 个 属性 来 代替 CSS 表达 式 。 如 果 样 式 属性 必须 在 页 
面 周期 内 动态 地 改变 ,使 用 事件 句柄 来 代替 CSS 表达 式 是 一 个 可 行 的 办 法 。 如 果 必 须 使 
用 CSS 表达 式 , 一 定 要 记 住 它们 要 计算 成 千 上 万 次 并 且 可 能 会 对 页 面 的 性 能 产生 影响 。 


17.5.19 使 用 外 部 JavaScript 和 CSS 


很 多 性 能 规则 都 是 关于 如 何 处 理 外 部 文件 的 。 但 是 ,在 采取 这 些 措 施 前 可 能 会 问 一 
个 更 基本 的 问题 : JavaScript 和 CSS 是 应 该 放 在 外 部 文件 中 还 是 把 它们 放 在 页 面 本 身 
内 呢 ? 

在 实际 应 用 中 使 用 外 部 文件 可 以 提高 页 面 速度 ,因为 JavaScript 和 CSS 文件 都 能 在 
浏览 器 中 产生 缓存 。 内 置 在 HTML 文档 中 的 JavaScript 和 CSS 则 会 在 每 次 请 求 中 随 
HTML 文档 重新 下 载 , 这 虽然 减少 了 HTTP 请 求 的 次 数 , 却 增加 了 HTML 文档 的 大 小 。 
从 另 一 方面 来 说 ,如 果 外 部 文件 中 的 JavaScript 和 CSS 被 浏览 器 缓存 ,在 没有 增加 
HTTP 请 求 次 数 的 同时 可 以 减少 HTML 文档 的 大 小 。 

关键 问题 是 ,外 部 JavaScript 和 CSS 文件 缓存 的 频率 和 请 求 HTML 文档 的 次 数 有 
关 。 虽 然 有 一 定 的 难度 ,但 是 仍然 有 一 些 指 标 可 以 测量 它 。 如 果 一 个 会 话 中 用 户 会 浏览 
网 站 中 的 多 个 页 面 , 并 且 这 些 页 面 中 会 重复 使 用 相同 的 脚本 和 样式 表 , 绥 存 外 部 文件 就 会 
带 来 更 大 的 益处 。 

许多 网 站 没有 功能 建立 这 些 指标 。 对 于 这 些 网 站 来 说 ,最 好 的 解决 方法 就 是 把 
JavaScript 和 CSS 作为 外 部 文件 引用 。 比 较 适合 使 用 内 徊 代码 的 例外 就 是 网 站 的 主页 ， 
如 Yahoo! 主页 和 My Yahoo!。 主 页 在 一 次 会 话 中 拥有 较 少 (可 能 只 有 一 次 ) 的 浏览 量 ， 
可 以 发 现 内 置 JavaScript 和 CSS 对 于 终端 用 户 来 说 会 加 快 响应 时 间 。 

对 于 拥有 较 大 浏览 量 的 首页 来 说 ,有 一 种 技术 可 以 平衡 内 置 代码 带 来 的 HTTP 请 3 
减少 与 通过 使 用 外 部 文件 进行 缓存 带 来 的 好 处 。 其 中 一 个 就 是 在 首页 中 内 置 JavaScript 
和 CSS, 但 是 在 页 面 下 载 完 成 后 动态 下 载 外 部 文件 ,在 子 页 面 中 使 用 到 这 些 文件 时 ,它们 
已 经 缓存 到 浏览 器 了 。 


17.5.20 削减 JavaScript 和 CSS 


精简 是 指 从 去 除 代码 不 必要 的 字符 减少 文件 大 小 从 而 节省 下 载 时 间 。 消 减 代 码 时 ， 
所 有 的 注释 、 不 需要 的 空白 字符 (空格 .换行 .Tab 缩 进 ) 等 都 要 去 掉 。 在 JavaScript 中 ,由 
于 需要 下 载 的 文件 体积 变 小 了 ,从 而 节省 了 响应 时 间 。 精 简 JavaScript 中 目前 用 到 的 最 
广泛 的 两 个 工具 是 JSMin 和 YUI Compressor。YUI Compressor 还 可 用 于 精简 CSS。 

混淆 是 另外 一 种 可 用 于 源 代 码 优化 的 方法 。 这 种 方法 要 比 精简 复杂 一 些 并 且 在 混 清 
的 过 程 更 易 产生 问题 。 在 对 美国 前 10 大 网 站 的 调查 中 发 现 ,精简 也 可 以 缩小 原来 代码 体 
积 的 21%, 而 混淆 可 以 达到 25%。 尽 管 混淆 法 可 以 更 好 地 缩减 代码 ,但 是 对 于 JavaScript 
来 说 精简 的 风险 更 小 。 
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除 消 减 外 部 的 脚本 和 样式 表 文 件 外 ,一 script 二 和 所 style 之 代码 块 也 可 以 并 且 应 该 进 
行 消减 。 即 使 用 Gzip 压缩 过 脚本 和 样式 表 , 精 简 这 些 文件 仍然 可 以 节省 5% 以 上 的 空 
间 。 由 于 JavaScript 和 CSS 的 功能 和 体积 的 增加 ,消减 代码 将 会 获得 益处 。 


17.5.21 用 一 link 之 代替 @import 


前 面 的 最 佳 实现 中 提 到 CSS 应 该 放置 在 顶端 以 利于 有 序 加 载 呈现 。 
在 IE 中 ,页 面 底部 @import 和 使 用 二 link 之 的 作用 是 一 样 的 ,因此 最 好 不 要 使 用 它 。 


17.5.22 ”避免 使 用 滤 镜 


IE 独 有 的 属性 AlphalmageLoader 用 于 修正 7.0 以 下 版 本 中 显示 PNG 图 片 的 半 透 
明 效 果 。 这 个 滤 镜 的 问题 在 于 浏览 器 加 载 图 片 时 会 终止 内 容 的 呈现 并 且 冻 结 浏览 器 。 在 
每 一 个 元 素 ( 不 仅仅 是 图 片 ) 它 都 会 运算 一 次 ,增加 了 内 存 开 支 ,因此 它 的 问题 是 多 方 
面 的 。 

完全 避免 使 用 AlphaImageLoader 的 最 好 方法 就 是 使 用 PNG8 格式 来 代替 ,这 种 格 
式 能 在 IE 中 很 好 地 工作 。 如 果 确 实 需要 使 用 AlphalImageLoader, 请 使 用 下 划 线 filter 
又 使 之 对 IE7 以 上 版 本 的 用 户 无 效 。 


17.5.23 ”把 脚本 置 于 页 面 底 部 


脚本 带 来 的 问题 就 是 它 阻止 了 页 面 的 平行 下 载 。HTTP/1. 1 规范 建议 ,浏览 器 每 个 
主机 名 的 并 行 下 载 内 容 不 超过 两 个 。 如 果 图 片 放 在 多 个 主机 名 上 ,可 以 在 每 个 并 行 下 载 
中 同时 下 载 两 个 以 上 的 文件 。 但 是 当下 载 脚本 时 ,浏览 器 就 不 会 同时 下 载 其 他 文件 了 , 即 
便 主机 名 不 相同 。 

在 某 些 情况 下 把 脚本 移 到 页 面 底 部 可 能 不 太 容 易 。 例 如 ,如 果 脚 本 中 使 用 了 
document. write 来 插入 页 面 内 容 , 它 就 不 能 被 往 下 移动 了 ,这 里 可 能 还 会 有 作用 域 的 问 
题 。 很 多 情况 下 ,都 会 遇 到 这 方面 的 问题 。 

一 个 经 常用 到 的 蔡 代 方法 就 是 使 用 延迟 脚本 。DEFER 属性 表明 脚本 中 没有 包含 
document. write, 它 告诉 浏览 器 继续 显示 。 不 幸 的 是 ,Firefox 并 不 支持 DEFER 属性 。 在 
Internet Explorer 中 ,脚本 可 能 会 被 延迟 但 效果 也 不 会 像 人 们 所 期 望 的 那样 。 如 果 脚 本 
可 以 被 延迟 ,那么 它 就 可 以 移 到 页 面 的 底部 ,这 会 让 页 面 加载 得 快 一 点 。 


17.5.24 剔除 重复 脚本 
在 同一 个 页 面 中 重复 引用 JavaScript 文件 会 影响 页 面 的 性 能 ,人 们 可 能 会 认为 这 种 


情况 并 不 多 见 。 对 于 美国 前 10 大 网 站 的 调查 显示 其 中 有 两 家 存在 重复 引用 脚本 的 情况 。 
有 两 种 主要 因素 导致 一 个 脚本 被 重复 引用 的 奇怪 现象 发 生 : 团队 规模 和 脚本 数量 。 如 果 
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真 的 存在 这 种 情况 ,重复 脚本 会 引起 不 必要 的 HTTP 请 求 和 无 用 的 JavaScript 运算 ,这 
降低 了 网 站 性 能 。 

在 Internet Explorer 中 会 产生 不 必要 的 HTTP 请 求 , 而 在 Firefox 却 不 会 。 在 
Internet Explorer 中 ,如果 一 个 脚本 被 引用 两 次 而 且 又 不 可 缓存 , 它 就 会 在 页 面 加载 过 程 
中 产生 两 次 HTTP 请 求 。 即 时 脚本 可 以 缓存 , 当 用 户 重 载 页 面 时 也 会 产生 额外 的 HTTP 
请 求 。 

除 增加 额外 的 HTTP 请 求 外 ,多 次 运算 脚本 也 会 浪费 时 间 。 在 Internet Explorer 和 
Firefox 中 不 管 脚本 是 否 可 缓存 ,它们 都 存在 重复 运算 JavaScript 的 问题 。 

一 个 避免 偶尔 发 生 的 两 次 引用 同一 脚本 的 方法 是 在 模板 中 使 用 脚本 管理 模块 引用 脚 
本 。 在 HTML 页 面 中 使 用 二 script /二 标签 引用 脚本 的 最 常见 的 方法 就 是 : 


< script type= "text/javascript" sro= "menu 1.0.17.js"> < /script> 
在 PHP 中 可 以 通过 创建 名 为 insertScript 的 方法 来 替代: 
< ?php insertscript ("menu.js") ?> 


为 了 防止 多 次 重复 引用 脚本 ,这 个 方法 中 还 应 该 使 用 其 他 机 制 来 处 理 脚 本 ,如 检查 所 
属 目录 和 在 脚本 文件 名 中 增加 版 本 号 以 用 于 Expire 文件 头等 。 


17.5.25 减少 DOM 访问 


使 用 JavaScript 访问 DOM 元 素 比较 慢 , 因 此 为 了 获得 更 多 的 应 该 页 面 , 应 该 做 到 : 

(1) 缓存 已 经 访问 过 的 有 关 元 素 ; 

(2) 线 下 更 新 完 节 点 之 后 再 将 它们 添加 到 文档 树 中 ; 

(3) 避免 使 用 JavaScript 来 修改 页 面 布 局 。 

有 关 此 方面 的 更 多 信息 请 查看 Julien Lecomte 在 YUI 专题 中 的 文章 “高 性 能 Ajax 
应 用 程序 ”。 


17.5.26 开发 智能 事件 处 理 程序 


有 时 候 人 们 会 感觉 到 页 面 反应 迟钝 ,这 是 因为 DOM 树 元 素 中 附加 了 过 多 的 事件 句 
柄 并 且 一 些 事件 句 病 被 频繁 地 触发 。 这 就 是 为 什么 说 使 用 event delegation( 事 件 代理 ) 
是 一 种 好 方法 了 。 如 果 在 一 个 div 中 有 10 个 按钮 ,用 户 只 需要 在 div 上 附加 一 次 事件 句 
柄 就 可 以 了 ,而 不 用 去 为 每 一 个 按钮 增加 一 个 句柄 。 事 件 冒 泡 时 可 以 捕捉 到 事件 并 判断 
出 是 哪个 事件 发 出 的 。 

同样 也 不 用 为 了 操作 DOM 树 而 等 待 onload 事件 的 发 生 。 用 户 需要 做 的 就 是 等 待 
树 结构 中 要 访问 的 元 素 出 现 ,也 不 用 等 待 所 有 图 像 都 加 载 完 毕 。 

用 户 可 能 会 希望 用 DOMContentLoaded 事件 来 代 蔡 onload ,但 是 在 所 有 浏览 器 都 支 
持 它 之 前 可 使 用 YUI 事件 应 用 程序 中 的 onAvailable 方法 。 
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17.5.27 减 小 cookie 体积 


HTTP cookie 可 以 用 于 权限 验证 和 个 性 化 身份 等 多 种 用 途 。cookie 内 的 有 关 信息 
是 通过 HTTP 文件 头 在 Web 服务 器 和 浏览 器 之 间 进 行 交 流 的 。 因 此 保持 cookie 尽 可 能 
小 以 减少 用 户 的 响应 时 间 十 分 重要 。 

更 多 有 关 信 息 可 以 查看 Tenni Theurer 和 Patty Chi 的 文章 When the Cookie 
Crumbles 。 这 些 研 究 中 主要 包括 : 

(1) 去 除 不 必要 的 cookie; 

(2) 使 cookie 体积 尽量 小 以 减少 对 用 户 响应 的 影响 ; 

(3) 注意 在 适应 级 别 的 域名 上 设置 cookie 以 便 使 子 域名 不 受 影响 ; 

(4) 设置 合理 的 过 期 时 间 。 较 早 的 Expire 时 间 和 不 要 过 早 地 清除 cookie, 都 会 改善 
用 户 的 响应 时 间 。 


17.5.28 对 于 页 面 内 容 使 用 无 cookie 域名 


当 浏览 器 在 请 求 中 同时 请 求 一 张 静 态 的 图 片 和 发 送 cookie 时 ,服务 器 对 于 这 些 
cookie 不 会 做 任何 使 用 。 因 此 它们 只 是 因为 某 些 负面 因素 而 创建 的 网 络 传输 。 所 有 应 该 
确定 对 于 静态 内 容 的 请 求 是 无 cookie 的 请 求 。 创 建 一 个 子 域名 并 用 它 来 存放 所 有 静态 
内 容 。 

如 果 域 名 是 www. example. org, 可 以 在 static. example. org 上 存在 静态 内 容 。 但 
是 ,如 果 不 是 在 www. example. org 上 而 是 在 顶级 域名 example. org 设置 了 cookie, 那 么 
所 有 对 于 static. example. org 的 请 求 都 包含 cookie。 在 这 种 情况 下 ,可 以 再 重新 购买 一 
个 新 的 域名 来 存放 静态 内 容 , 并 且 要 保持 这 个 域名 是 无 cookie 的 。Yahool! 使 用 的 是 
ymig. com,YouTube 使 用 的 是 ytimg. com,Amazon 使 用 的 是 images-anazon. com 等 。 

使 用 无 cookie 域名 存放 静态 内 容 的 另外 一 个 好 处 就 是 一 些 代理 (服务 器 ) 可 能 会 拒 
绝对 cookie 的 内 容 请 求 进行 缓存 。 一 个 相关 的 建议 就 是 ,如 果 想 确定 应 该 使 用 example 
.org 还 是 www. example. org 作为 一 个 主页 ,要 考虑 到 cookie 带 来 的 影响 。 忽 略 掉 www 
会 使 用 户 除 了 把 cookie 设置 到 * . example. org(* 是 泛 域名 解析 ,代表 了 所 有 子 域名 译 
者 dudo 注 ) 外 没有 其 他 选择 ,因此 出 于 性 能 方面 的 考虑 最 好 使 用 带 有 www 的 子 域名 并 
且 在 它 上 面 设 置 cookie。 


17.5.29 优化 图 像 


设计 人 员 完 成 对 页 面 的 设计 之 后 ,不 要 急于 将 它们 上 传 到 Web 服务 器 ,这 里 还 需要 
做 几 件 事 : 

检查 一 下 GIF 图 片 中 图 像 颜 色 的 数量 是 否 和 调 色 板 规格 一 致 。 使 用 imagemagick 中 
以 下 的 命令 行 很 容易 检查 : 
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identify - verbose image.gif 

如 果 发 现 图 片 中 只 用 到 了 4 种 颜色 ,而 在 调 色 板 中 显示 了 256 色 的 颜色 槽 ,那么 这 张 
图 片 就 还 有 压缩 的 空间 。 

尝试 把 GIF 格式 转换 成 PNG 格式 ,看 看 是 否 节省 空间 。 大 多 数 情 况 下 是 可 以 压缩 
的 。 由 于 浏览 器 支持 有 限 ,设计 者 们 往往 不 太 乐意 使 用 PNG 格式 的 图 片 ,不 过 这 都 是 过 
去 的 事情 了 。 现 在 只 有 一 个 问题 就 是 在 真 彩 PNG 格式 中 的 alpha 通道 半 透 明 问题 ,不 过 
同样 地 ,GIF 也 不 是 真 彩 格式 也 不 支持 半 透 明 。 因 此 GIF 能 做 到 的 ,PNG(PNG8) 同 样 也 
能 做 到 (除了 动画 )。 下 面 这 条 简单 的 命令 可 以 安全 地 把 GIF 格式 转换 为 PNG 格式 ， 


Corvert image.gif image.png 
这 里 要 说 的 是 :“ 给 PNG 一 个 施展 身手 的 机 会 吧 !” 
在 所 有 的 PNG 图 片上 运行 pngcrush( 或 者 其 他 PNG 优化 工具 )。 例 如 : 


Pngcrush image.png - rem alla - reduce — brute result .png 


在 所 有 的 JPEG 图 片上 运行 jpegtran。 这 个 工具 可 以 对 图 片 中 出 现 的 锯齿 等 做 无 损 
操作 ,同时 它 还 可 以 用 于 优化 和 清除 图 片 中 的 注释 以 及 其 他 无 用 信息 (如 EXIF 信息 ): 


jregtran - copy none - optimize -Perfect src.jpg dest.jpg 


17.5.30 优化 CSS Spirite 


在 Spirite 中 水 平 排列 图 片 ,垂直 排列 会 稍稍 增加 文件 大 小 ;在 Spirite 中 把 颜色 较 近 
的 组 合 在 一 起 可 以 降低 颜色 数 ,理想 状况 是 低 于 256 色 以 便 适用 PNG8 格式 ;为 了 便于 移 
动 , 不 要 在 Spirite 的 图 像 中 间 留 有 较 大 空隙 。 这 虽然 不 大 会 增加 文件 大 小 但 对 于 用 户 代 
理 来 说 它 需要 更 少 的 内 存 来 把 图 片 解压 为 像素 地 图 。 


17.5.31 不 要 在 HTML 中 缩放 图 像 


不 要 为 了 在 HTML 中 设置 长 宽 而 使 用 比 实际 需要 大 的 图 片 。 如 果 需 要 : 

< img width= "100" height= "100" src= "mycat.jpg" alt= "My Cat”" /> 

那么 图 片 (mycat. jpg) 就 应 该 是 100 X100 像素 而 不 是 把 一 个 500 X 500 像素 的 图 片 
缩小 使 用 。 
17.5.32 ”favicon. ico 要 小 而 且 可 缓存 


favicon. ico 是 位 于 服务 器 根 目录 下 的 一 个 图 片 文 件 。 它 是 必定 存在 的 ,因为 即使 不 
关心 它 是 否 有 用 ,浏览 器 也 会 对 它 发 出 请 求 , 因 此 最 好 不 要 返回 一 个 404 Not Found 的 响 
应 。 由 于 是 在 同一 台 服 务 器 上 的 , 它 每 被 请 求 一 次 cookie 就 会 被 发 送 一 次 。 这 个 图 片 文 


220 


第 17 章 贰 二 


件 还 会 影响 下 载 顺 序 , 例 如 在 正 中 , 当 在 onload 中 请 求 额外 的 文件 时 ,favicon 会 在 这 
额外 内 容 被 加 载 前 下 载 。 

因此 ,为 了 减少 favicon. ico 带 来 的 整 端 , 要 做 到 : 

(1) 文件 尽量 地 小 ,最 好 小 于 1KB; 

(2) 在 适当 的 时 候 ( 也 就 是 不 打算 再 换 favicon. ico 的 时 候 , 因 为 更 换 新 文件 时 不 能 对 
它 进行 重 命名 ) 为 它 设置 Expires 文件 头 。 可 以 很 安全 地 把 Expires 文件 头 设置 为 未 来 的 
儿 个 月 ,可 以 通过 核对 当前 favicon. ico 上 次 的 编辑 时 间 来 做 出 判断 。 

Imagemagick 可 以 帮 用 户 创建 小 巧 的 favicon。 
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17.5.33 保持 单个 内 容 小 于 25KB 


这 条 限制 主要 是 因为 iPhone 不 能 缓存 大 于 25KB 的 文件 ,注意 这 里 指 的 是 解压 缩 后 
的 大 小 。 由 于 单纯 Gzip 压缩 可 能 达 不 要 求 ,因此 精简 文件 就 显得 十 分 重要 。 

查看 更 多 信息 ,请 参阅 Wayne Shea 和 Tenni Theurer 的 文章 Performance 
Research, Part 5: iPhone Cacheability —Making it SiicR 。 


17.5.34 打包 组 件 成 复合 文本 

把 页 面 内 容 打 包 成 复合 文本 就 如 同 带 有 多 附件 的 Email, 它 能 够 使 用 户 在 一 个 
HTTP 请 求 中 取得 多 个 组 件 ( 切 记 : HTTP 请 求 是 很 奢侈 的 ) 。 当 使 用 这 条 规则 时 ,首先 
要 确定 用 户 代理 是 否 支 持 (iPhone 就 不 支持 ) 。 
17.6 本 章 小 结 

本 章 详细 介绍 了 Web 前 端 相关 的 基础 知识 .Web 前 端 性 能 的 重要 性 以 及 如 何 使 用 


工具 评估 Web 前 端 性 能 。 随 着 客户 端 技术 的 发 展 , Web 前 端 性 能 已 经 成 为 Web 应 用 性 
能 的 一 个 主要 研究 方向 。 
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